标签：style   blog   http   os   io   数据   2014   ar   

大数据分析技术

MR ：离线计算框架
Storm ：实时计算框架
Spark ：内存计算框架

YARN 基本架构

ResourceManager

? 处理客户端请求
? 启动/ 监控ApplicationMaster
? 监控NodeManager
? 资源分配与调度

NodeManager

? 单个节点上的资源管理
? 处理来自ResourceManager 的命令
? 处理来自ApplicationMaster 的命令

ApplicationMaster （以MRAppMaster 为例）

? 数据切分
? 为应用程序申请资源，并分配给内部任务

大数据分析技术,布布扣,bubuko.com

大数据分析技术

标签：style   blog   http   os   io   数据   2014   ar   

原文地址：http://www.cnblogs.com/muzhongjiang/p/3886485.html