领先一步
VMware 提供培训和认证,助您加速进步。
了解更多在 SpringOne2GX 2015 上录制 主讲人:Thomas Risberg 大数据主题 幻灯片:http://www.slideshare.net/SpringCentral/hadoop-workflows-using-spring-technologies
Hadoop 生态系统正变得越来越大,也越来越复杂。在使用这个生态系统中的多个项目时,您不得不处理这些项目所倡导的不同理念和使用模式。“Spring for Apache Hadoop”项目使用 Data、Integration、Batch 和 Boot 等许多 Spring 项目来解决这些问题。它通过提供统一的配置模型以及易于使用的 API 来使用 HDFS、MapReduce、Pig 和 Hive,从而简化了 Apache Hadoop 的开发。如果您使用“Spring for Apache Hadoop”项目,您可以在转向编写 Apache Hadoop 的应用程序和工作流时,充分利用您现有的 Java 和 Spring 技能。在本次演示中,我们将了解它如何简化使用 MapReduce、Spark、Hive 和 Pig 作业开发工作流的过程,同时在 Apache、Cloudera、Hortonworks 和 Pivotal 发行版之间提供可移植性。
我们还将展示 Spring Cloud 在构建分布式应用程序方面的实用性,这些应用程序可以使用集中式配置、领导者选举、分布式锁和状态在 Hadoop YARN 上运行。