关于Spark下的standalone模式的搭建

标签：机器   and   man   模式   sla   ast   管理   amp   基础   

1.介绍standalone

　　Standalone模式是Spark自身管理资源的一个模式，类似Yarn
　　Yarn的结构:
　　　　ResourceManager: 负责集群资源的管理
　　　　NodeManager：负责当前机器的资源管理
　　　　CPU&内存
　　Spark的Standalone的结构：
　　　　Master: 负责集群资源管理
　　　　Worker: 负责当前机器的资源管理
　　　　CPU&内存

2.在local得基础上搭建standalone

3.修改env.sh

4.修改slave

5.启动

关于Spark下的standalone模式的搭建

标签：机器   and   man   模式   sla   ast   管理   amp   基础   

原文地址：http://www.cnblogs.com/juncaoit/p/6373250.html