简化大数据应用开发 ,Spring XD 1.0.0.M5 发布
Spring XD是一个统一的,分布式,可扩展的系统用于 data ingestion,实时分析,批量处理和数据导出。该项目的目标是简化大数据应用的开发。
Spring XD 团队发布了 Spring XD 1.0.0 Milestone 5 版本,现已提供下载。
新特性:
-
Pre-defined batch jobs for JDBC to HDFS
-
Many additional job shell commands for controlling and reporting on batch jobs.
-
Hadoop Dataset Avro sink that uses the Kite SDK
-
HDFS sink now supports codecs (gzip, snappy, bzip2, lzo) and fine-grained control over file naming
-
JMS source module now support Topics in addition to Queues
-
Improved support for use of Gemfire Locators
-
Aggregator module for batching that also supports a backing message store for checkpointing the event stream to memory, Redis, or a relational database.
-
Support for separate control and data transport protocols
-
XD servers are now built on top of Spring Boot
此版本解决了 140+ 个 Jira 问题,更多信息请前往: changelog 和 reference manual。
同时也提供了简单的示例和部署到 EC2 上面的脚本。
如果你是个 Mac 用户或者是 Homebrew 行家,可以像下面这样安装:
1 | $ brew tap pivotal/tap |
1 | $ brew install springxd |
相关资讯
- 简化大数据应用开发 ,Spring XD 1.0.0.M5 发布
- 简化大数据开发, Spring XD 1.2 GA/1.1.3 发布
- Spring XD 1.0 里程碑1发布,简化大数据应用开发
- Spring XD 1.1: 简化大数据一如Spring之于Java EE
- Spring XD 1.2.1 发布
- Spring Data MongoDB 1.0.0.M5 发布
- Spring XD 1.1 RC1 发布
- Spring XD 1.1.1 发布,提升 Kafka 总线性能
- 让 Spring 应用开发更容易:Spring Boot
- 谷歌发布Skaffold,简化Kubernetes应用程序持续开发