码迷,mamicode.com
首页 > 其他好文 > 详细

大数据计算引擎发展的四个阶段

时间:2017-11-13 00:15:18      阅读:242      评论:0      收藏:0      [点我收藏+]

标签:nbsp   处理   spark   mapreduce   数据   流计算   map   mapr   bsp   

根据一些公开资料整理,也许有失偏颇,仅供参考:

 

1.第一代

Hadoop 承载的 MapReduce

2.第二代

支持 DAG(有向无环图) 的框架: Tez 、 Oozie,主要还是还是批处理任务

3.第三代

Job 内部的 DAG(有向无环图) 支持(不跨越 Job),以及强调的实时计算:Spark

4.第四代

对流计算的支持,以及更一步的实时性:Flink

大数据计算引擎发展的四个阶段

标签:nbsp   处理   spark   mapreduce   数据   流计算   map   mapr   bsp   

原文地址:http://www.cnblogs.com/liugh/p/7823480.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!