note.wcoder.com
wcoder GitHub

https://github.com/apache/beam

Apache Beam指南

Apache Beam:先进的统一编程模型
实施可在任何执行引擎上运行的批处理和流数据处理作业。

诞生背景:
分布式数据处理发展迅猛 –> 新的分布式数据处理技术越来越多 –> Hadoop MapReduce,Apache Spark,Apache Storm,Apache Flink,Apache Apex –> 新技术高性能 , 受欢迎,人们喜新厌旧 –> 业务的迁移 –> 迁移条件: 学习新技术,重写业务逻辑

Apache Beam - 原名 Google DateFlow
2016年2月份成为Apache基金会孵化项目
2017年1月10日正式毕业成为顶级项目
继MapReduce,GFS和BigQuery之后,Google在大数据处理领域对开源社区的又一个超级大的贡献

← Previous Next →
Less
More