Apache Beam 0.6.0,大数据批处理和流处理标准

organicmeercat 发布于2月前 阅读874次
0 条评论

Apache Beam 0.6.0 发布了,该版本为 Python 编程语言引入了一个新的 SDK。

此外,该版本为 Apache HBase 在 Java SDK 中添加了一个新的 IO 链接器,以及一些常见的错误修复和改进。

最后,还改进了对 Beam 模型的支持,包括支持最近推出的 State 和 Timer API,以及 Beam 链接到分布式文件系统的链接器。

发布主页发布说明

Apache Beam 是 Google 在 2016 年 2 月份贡献给 Apache 基金会的项目,主要目标是统一批处理和流处理的编程范式,为无限,乱序,web-scale 的数据集处理提供简单灵活,功能丰富以及表达能力十分强大的 SDK。Apache Beam 项目重点在于数据处理的编程范式和接口定义,并不涉及具体执行引擎的实现,Apache Beam 希望基于 Beam 开发的数据处理程序可以执行在任意的分布式计算引擎上。

查看原文: Apache Beam 0.6.0,大数据批处理和流处理标准

共收到0条回复

需要 登录 后回复方可回复, 如果你还没有账号你可以 注册 一个帐号。