码迷,mamicode.com
首页 > 其他好文 > 详细

【待补充】Spark 集群模式 && Spark Job 部署模式

时间:2018-10-13 16:53:19      阅读:118      评论:0      收藏:0      [点我收藏+]

标签:font   使用   job   https   mesos   http   详情   bsp   shell   


 

0. 说明

  Spark 集群模式 && Spark Job 部署模式

 

 


 

1. Spark 集群模式

  [ Local ]
  使用一个 JVM 模拟 Spark 集群


  [ Standalone ]
  启动 master + worker 进程


  [ mesos ]
  --


  [ Yarn ]
  --

 

 


 

2. Spark Job 部署模式

  [ Client ]
  Driver 程序运行在 Client 端。


  [ Cluster ]
  Driver 程序运行在某个 worker 上。
  spark-shell 只能以 Client 方式启动。

 

  详情查看  Spark job 部署模式

 

 

 


 

【待补充】Spark 集群模式 && Spark Job 部署模式

标签:font   使用   job   https   mesos   http   详情   bsp   shell   

原文地址:https://www.cnblogs.com/share23/p/9783218.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!