Spring for Apache Hadoop 2.0 现在已正式发布 (GA)

发布 | Thomas Risberg | 2014 年 6 月 11 日 | ...

我们很高兴地宣布 Spring for Apache Hadoop 2.0 版本现在已正式发布 (GA)。


提供对 Hadoop v2.0 和 YARN 的支持,同时保持与 Hadoop v1.0 的兼容性


自从 Spring for Apache Hadoop 1.0 发布 以来已经过去一年多了。当时 Spring 是 VMware 的一部分。 Spring for Apache Hadoop 1.0 支持 Hadoop 1.0.4 和 1.1.1,但不支持最新的 2.0 alpha 版本。 从那时起发生了很多变化。 Spring 现在是 Pivotal 的一部分,这使我们与一系列优秀的开源技术联系在一起。 Apache Hadoop 项目已经发布了几个新的 Hadoop 版本,包括引入 YARN 框架的 2.2.0。 因此,继续推进 Spring for Apache Hadoop 项目是理所当然的。 对于 Spring for Apache Hadoop 2.0 版本,主要主题是

  • 为新版本和发行版提供支持,例如
  • Apache Hadoop 2.2.0, 2.4.0
  • Pivotal HD 2.0
  • Cloudera CDH 5
  • Hortonworks HDP 2.1
  • 保持与 Hadoop v1.0 的兼容性
  • 为开发 YARN 应用程序提供出色的编程模型
  • 添加新功能,例如
  • 用于处理 HDFS 数据的新写入器和读取器
  • 使用 Kite SDK 编写和读取 POJO 数据集的新支持

我们提供了示例应用程序,用于展示如何使用更常用的功能。 我们还有一些Spring IO 指南,用于开发 Spring YARN 应用程序。

Spring for Apache Hadoop 2.0 GA 版本的发布目标发行版是当前的 Apache Hadoop v2 稳定版本,即 2.2.0。 这是 2.0.0.RELEASE 的传递依赖项使用的版本。

对于其他版本或发行版,我们继续在 Spring IO 发布存储库中提供具有各自传递依赖项的特定工件

  • 2.0.0.RELEASE(默认 - Apache Hadoop 稳定版 2.2.0)
  • 2.0.0.RELEASE-hadoop24 (Apache Hadoop 最新版 2.4.0)
  • 2.0.0.RELEASE-hadoop12 (Apache Hadoop 稳定版 1.2.1)
  • 2.0.0.RELEASE-phd1 (Pivotal HD 1.1)
  • 2.0.0.RELEASE-phd20 (Pivotal HD 2.0)
  • 2.0.0.RELEASE-cdh4 (Cloudera CDH4 MR1)
  • 2.0.0.RELEASE-cdh5 (Cloudera CDH5 YARN)
  • 2.0.0.RELEASE-hdp13 (Hortonworks HDP 1.3)
  • 2.0.0.RELEASE-hdp20 (Hortonworks HDP 2.0)
  • 2.0.0.RELEASE-hdp21 (Hortonworks HDP 2.1)

有关如何使用这些版本进行构建的说明,请参见项目 Wiki

Apache Hadoop 2.2.0、2.4.0 和 1.2.1 的版本也可在 Maven Central 存储库中找到。

有关更多项目特定信息,请参见项目页面

SpringOne 2GX 2014 即将到来

尽快在 德克萨斯州达拉斯举行的 SpringOne 上预订您的位置(9 月 8-11 日)。 这是第一手了解所有情况并提供直接反馈的绝佳机会。 将有关于 Spring for Apache Hadoop 的深入会议以及一般的大数据讲座,以介绍大数据应用程序开发中的前景和挑战。

获取 Spring 新闻通讯

通过 Spring 新闻通讯保持联系

订阅

抢先一步

VMware 提供培训和认证,以加速您的进步。

了解更多

获得支持

Tanzu Spring 在一个简单的订阅中提供对 OpenJDK™、Spring 和 Apache Tomcat® 的支持和二进制文件。

了解更多

即将举行的活动

查看 Spring 社区中所有即将举行的活动。

查看全部