spark-RDD缓存,checkpoint机制,有向无环图,stage 1.RDD依赖关系 RDD依赖关系有2种不同类型,窄依赖和宽依赖。 窄依赖(narrow dependency):是指每个父RDD的Partition最多被子RDD一个Partition使用。就好像独生子女一样。窄依赖的算子包 ...
分类:
其他好文 时间:
2021-06-22 18:39:47
阅读次数:
0
累加器 序列化 宽窄依赖 窄依赖指的是每一个父RDD的Partition最多被子RDD的一个Partition使用,窄依赖我形象的比喻为独生子女 宽依指的是多个子RDD的Partition会依赖同一个父RDD的 Partition,会引起shuffle.总结:宽依我们形象的比喻为超生 DAG DAG ...
分类:
其他好文 时间:
2020-01-22 12:44:35
阅读次数:
80
而被爱因斯坦称为第八大奇迹的,是“复利”。 你或许听过这个名词,或许没有。但你一定听过这个故事: 舍罕王打算奖赏国际象棋的发明人——宰相西萨·班·达依尔。 国王问他想要什么, 他对国王说: 陛下,请您在这张棋盘的第1个小格里,赏给我1粒麦子,在第2个小格里给2粒,第3小格给4粒,以后每一小格都比前一 ...
分类:
其他好文 时间:
2019-01-13 17:13:43
阅读次数:
482
1.子元素过滤器介绍 :nth-child 获得指定索引的孩子,从1开始 :first-child 获得第一个孩子 :last-child 获得最后一个孩子 :only-child 获得独生子 2.代码实例 ...
分类:
Web程序 时间:
2018-09-06 23:54:47
阅读次数:
224
:nth-child(序号) 第几个孩子 :firtst-child 第一个孩子 :last-child 最后一个孩子 :only-child 独生子 ...
分类:
其他好文 时间:
2018-02-23 13:31:40
阅读次数:
207
朋友经常对我的评价就是性格好,像个女孩子,从来不和别人争吵,不喜欢说话。。。 我谈谈我自己吧 我家就我一个独生子,很多人会说,独生子很好啊,家里的所有好吃的,好用的都给你,不愁吃不愁穿。嗯嗯,没错,确实是这样的。可是我也没有还花钱。大学,大一,大二每学期也就花2000元,没错,就是2000元。我平常 ...
分类:
其他好文 时间:
2018-02-11 21:19:51
阅读次数:
165
线程的关系就如同一个家庭里父子关系、独生子、多兄弟的关系; 有控制、独立完成、协作完成、资源竞争等情况发生。 同时线程具有生命周期,由生老病死等情况发生。 1、单任务线程,除了启动和完成没有和其它线程发生任何关系; 2、控制与被控制关系; 3、资源竞争关系; 4、分组协作关系; ...
分类:
编程语言 时间:
2018-01-19 23:23:21
阅读次数:
189
为什么需要单例?只因为国家的独生子女政策(当然现在可以生2个) 单例是一个很孤独的物种,因为它的类里面做多只有也仅只有它一个。 常见的是懒汉及饿汉模式, 1.懒汉,为什么这么叫,看看英文,原为lazy loading,lazy(懒惰的),laoding(音如同佬),叫懒佬,然后一个佬==一条汉子,为 ...
分类:
编程语言 时间:
2017-08-22 10:38:30
阅读次数:
168
伪类选择器汇总伪类选择器有4种, 结构性伪类\UI伪类\动态伪类和其他伪类. 具体如下 结构性伪类选择器结构性伪类选择器它能够根据元素在文档中的位置选择元素, 这类元素都有个前缀":"1. 根元素选择器 只作用于html等底部标签.很少用 .. :root 2. 子元素选择器 子元素全选还要更细致.... ...
分类:
Web程序 时间:
2017-06-19 14:16:35
阅读次数:
223
老跳(因为性格太跳,被大家公认的外号),87年生,湖南人,上篇中老赵的大学下铺兄弟。 2008年大学毕业两人一同去的广州,住在求职公寓里找工作。 老赵找工作找了半个月,老跳却在到广州的第二天就开始上班了。 老跳家里其实底子不错,父母都在事业单位,还是独生子。 毕业那年,家里想让他回家接班,继续吃着铁 ...
分类:
移动开发 时间:
2017-03-04 13:01:46
阅读次数:
248