根据Mesos源码分析(6): Mesos Master的初始化中的代码分析，当Mesos-Master接收到launchTask消息的时候，会调用Master::launchTasks函数。 void Master::launchTasks( const UPID& from, const Fra... ...
分类：
其他好文 时间：
2016-08-01 00:13:52
阅读次数：
203
Task执行在上一节中，我们提到在Driver端CoarseGrainedSchedulerBackend中的launchTasks方法向Worker节点中的Executor发送启动任务命令，该命令的接收者是CoarseGrainedExecutorBackend（Standalone模式），类定义源码如下：private[spark] class CoarseGrainedExecutorBack...
分类：
其他好文 时间：
2015-10-29 00:49:13
阅读次数：
243
引言上一小节《任务执行机制和Task源码浅析1》介绍了Executor的注册过程。
这一小节，我将从Executor端，就接收LaunchTask消息之后Executor的执行任务过程进行介绍。1. Executor的launchTasks函数DriverActor提交任务，发送LaunchTask指令给CoarseGrainedExecutorBackend，接收到指令之后，让它内部的execu...
分类：
其他好文 时间：
2015-07-20 23:38:59
阅读次数：
175
spark内核揭秘-09-RDD的count操作 触发Job全生命周期-02
spark内核揭秘-09-RDD的count操作 触发Job全生命周期-02
spark内核揭秘-09-RDD的count操作 触发Job全生命周期-02
spark内核揭秘-09-RDD的count操作 触发Job全生命周期-02...
分类：
其他好文 时间：
2015-01-20 20:38:35
阅读次数：
233
