SpringOne2GX 2013 回顾:Hadoop 之上的内存数据和计算

新闻 | Pieter Humphrey | 2014 年 4 月 15 日 | ...

录制于加利福尼亚州圣克拉拉的 SpringOne2GX 2013 大会

演讲者:Jags Ramnarayan, Anthony Baker

Hadoop 以低廉的价格为我们提供了巨大的容量可伸缩性。但是核心 Hadoop 是为顺序访问设计的——一次写入,多次读取;这使得无法从实时/在线应用程序中使用 Hadoop。在其前面添加一个分布式内存层,您就可以获得两全其美——极高的速度、并发性以及扩展到非常大容量的能力。我们提出了内存数据网格与 Hadoop 的无缝集成,以实现有趣的新设计模式——将原始或处理后的数据摄取到 Hadoop 中,在内存中对操作数据进行随机读写,或者在 Hadoop 中进行大规模历史数据查询,查询时间为 O(1),无需 ETL Map-reduce 处理,从而能够对 Hadoop 中的数据进行深度 SQL 处理,或者能够轻松地将分析模型从 Hadoop 输出到内存中。我们将通过 Pivotal 内存实时和 Hadoop 平台来介绍这些想法和代码示例。

了解更多关于 Gemfire 和 Spring 的信息,请访问:http://projects.spring.io/spring-data-gemfire

了解更多关于 Spring 和 Hadoop 的信息,请访问:http://projects.spring.io/spring-hadoop

了解更多关于 Spring XD 的信息 http://projects.spring.io/spring-xd

了解更多关于 Pivotal HD 的信息 http://www.gopivotal.com/products/pivotal-hd

!{iframe width="560" height="315" src="//www.youtube.com/embed/YX0vg9PBpKg" frameborder="0" allowfullscreen}{/iframe}

获取 Spring 新闻通讯

通过 Spring 新闻通讯保持联系

订阅

领先一步

VMware 提供培训和认证,助您加速进步。

了解更多

获得支持

Tanzu Spring 提供 OpenJDK™、Spring 和 Apache Tomcat® 的支持和二进制文件,只需一份简单的订阅。

了解更多

即将举行的活动

查看 Spring 社区所有即将举行的活动。

查看所有