5. yarn

时间：2015-06-15 12:58:59 阅读：121 评论：0 收藏：0 [点我收藏+]

标签：

一. yarn产生背景：

1. mapreduce 1.0的问题：

1）JobTracker性能问题， 2）JobTracker单点问题，3）只支持mapreduce一个计算框架

2. 资源利用率：

3. 运维成本与数据共享：

运维成本

如果采用“一个框架一个集群”的模式，则可能需要多个管理员管理这些集群，进而增加运维成本，而共享模式通常需要少数管理员即可完成多个框架的统一管理

数据共享

随着数据量的暴增，跨集群间的数据移动不仅需花费更长的时间，且硬件成本也会大大增加，而共享集群模式可让多种框架共享数据和硬件资源，将大大减小数据移动带来的成本

4. 总结：

二. yarn基本架构：

ResourceMannager

NodeManager

ApplicationMaster

Container

三. yarn运行过程：

来自为知笔记(Wiz)

标签：

原文地址：http://www.cnblogs.com/51runsky/p/7cd2023db55ecd4e5c3de43315cd2bb7.html

踩

(0)

评论一句话评论（0）

分享档案

更多>

周排行