码迷,mamicode.com
首页 > 其他好文 > 详细

spark内核

时间:2015-10-11 19:53:08      阅读:211      评论:0      收藏:0      [点我收藏+]

标签:spark内核


术语解释

技术分享


Executor  多线程的方式运行


技术分享


每个partirion会被分配一个task


技术分享


taskset就是stage,一个stage由多个task组成



技术分享



技术分享


广播变量类似于hadoop的DistributedCache

技术分享



技术分享




本文出自 “一无所有 QQ:934033381” 博客,请务必保留此出处http://tianxingzhe.blog.51cto.com/3390077/1701758

spark内核

标签:spark内核

原文地址:http://tianxingzhe.blog.51cto.com/3390077/1701758

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!