Spring Hadoop - 在 Spring 框架下编写 Hadoop 应用的支持。
openkk
12年前
在Spring框架下支持编写 Hadoop 应用。Spring Hadoop使MapReduce、Streaming、Hive、Pig和级联工作能够通过Spring容器执行。Hadoop分布式文件系统的数据访问是通过JVM的脚本语言,如Groovy和JRuby启用。此外,还计划支持Hadoop包括FsShell和DistCp等工具。功能特性:
- 扩展Spring Batch来支持创建一个点对点的数据管道解决方案
- 简化HDFS的读写
- Spring Batch Tasklets for Map-Reduce an Streaming Jobs
- 与 Cascading, HBase, Hive 和 Pig