码迷,mamicode.com
首页 > 其他好文
第9课:Spark Streaming源码解读之Receiver在Driver的精妙实现全生命周期彻底研究和思考
一:Receiver启动的方式设想 1. Spark Streaming通过Receiver持续不断的从外部数据源接收数据,并把数据汇报给Driver端,由此每个Batch Durations就可以根据汇报的数据生成不同的Job。 2. Receiver属于Spark Streaming应用程序启动阶段,那么我们找Receiver在哪里启动就应该去找Spark Streaming的启动。...
分类:其他好文   时间:2016-05-20 19:40:41    阅读次数:241
奋斗吧,程序员——第四十一章 今日种种,似水无痕;明夕何夕,君已陌路
每天中午吃饭的时候,基本我和陈曦在一桌。 “喂,不怕你家刘主任吃醋啊?”我时不时要挖苦一下。 陈曦翻了翻白眼反唇相讥:“喂,最近有点玩物丧志啊。” “哦,是吗?难道你胸有大痣?给我看看呢。”现在和陈曦比较熟了,可以开比较荤的玩笑。 “去你的!”顿了一下,她说,“说真的,你不适合在这里。” “说真的,我觉得这里很好,没有压力又有美女陪吃陪聊。” “说真的,我是说真的。”陈曦又强调了一遍,...
分类:其他好文   时间:2016-05-20 19:40:03    阅读次数:188
Service要点全解析
1、Service概述 Service的主要作用是,让系统可以在后台干一些不与用户交互的操作,这些操作可能会比较耗时,比如去下载一些网络资源等;也可能是一项长期运行的工作,比如说监听电话来电、播放音乐等。初听起来,Service与线程Thread很像,但Service和Thread完全是两个不同的东西啊。 (1)Service不是运行在一个独立的进程中,它和我们的应用程序在同一个进程中...
分类:其他好文   时间:2016-05-20 19:38:19    阅读次数:292
关于本人帖子的一些解释
从标题上看出我写的帖子相关的问题的最终结果 所以,我的帖子的标题,一般都会加上前缀,且不同的前缀,表示不同含义: 且尽量达到自解释(self explainable)的效果。 即: 【已解决】:表示遇到了问题,经过折腾,最终解决了所以一般同时也会整理 【未解决】:表示尝试去解决某个问题,但是最终没解 ...
分类:其他好文   时间:2016-05-20 19:37:12    阅读次数:154
【转】bitbake 笔记
原文 http://blog.chinaunix.net/uid-17188120-id-4081314.html 1 当你已经编完一个系统比如sato映像,在编一个meta-toolchain的映像如何重用已经下载的源码。 修改build/local.conf变量 DL_DIR= 2 如果你用ct ...
分类:其他好文   时间:2016-05-20 19:36:47    阅读次数:480
基于框架的应用系统的质量属性
质量属性指的是影响质量的相关因素,是对质量的描述。下面我从6个常见的系统质量属性和一些其他质量属性进行系统的质量描述。 系统质量属性: 可用性: 在可用性方面,本系统可以相对应的任务如用户信息的传输,页面信息与数据库的传输,即可以完成特定任务和达到特定任务时具有高度的正确和完整度。在任务执行和信息传 ...
分类:其他好文   时间:2016-05-20 19:34:15    阅读次数:240
值得纪念的一次编程
楼主有点小白,个人觉得值得纪念,不喜勿喷。 最近在看java编程思想,遇到了求吸血鬼数的那一题,自己做的时候是把四位数分别放到数组arr里面,然后建立两个数组分别存arr中的两位。之后就遇到了许多问题,比如:如何将已经放入a数组的数不放入b数组,如何遍历数组使numa和numb不会重复计算等。其中将 ...
分类:其他好文   时间:2016-05-20 19:35:01    阅读次数:192
loading bar
上面的loading条,想到的办法是用两个半圆覆盖实现,结果也就这么做了,可是明明一个圆就可以的,哎智商堪忧... ...
分类:其他好文   时间:2016-05-20 19:33:25    阅读次数:161
WCF Basics - FAQs Series【WCF基础----问答系列教程】
WCF学习系列一【WCF Interview Questions-Part 1 翻译系列】 WCF学习系列二 【WCF Interview Questions – Part 2 翻译系列】 WCF学习系列三--【WCF Interview Questions – Part 3 翻译系列】 WCF学习 ...
分类:其他好文   时间:2016-05-20 19:33:27    阅读次数:144
SSL vs TLS vs STARTTLS (转)
There's often quite a bit of confusion around the different terms SSL, TLS and STARTTLS. SSL and TLS both provide a way to encrypt a communication cha ...
分类:其他好文   时间:2016-05-20 19:31:17    阅读次数:207
WCF学习系列汇总
最近在学习WCF,打算把一整个系列的文章都”写“出来,包括理论和实践,这里的“写”是翻译,是国外的大牛写好的,我只是搬运工外加翻译。翻译的不好,大家请指正,谢谢了。如果觉得不错的话,也可以给我点赞,这样我翻译下去的动力就更足了~~~ 1. Beginning WCF - MUST HAVE WCF ...
分类:其他好文   时间:2016-05-20 19:30:07    阅读次数:156
人生的路很长,路有很多分支,每个分支都对应着不一样的未来,然而你选择了现在的这条路你就必须走下去
人的一生常处于抉择之中,如:念哪一间大学?选哪一种职业?娶哪一种女子?……等等伤脑筋的事情。一个人抉择力的有无,可以显示其人格成熟与否。 倒是哪些胸无主见的人,不受抉择之苦。因为逢到需要决定的时候,他总是求询别人说:"嘿,你看怎么做?" 大凡能够成大功业的人,都是抉择力甚强的人。他知道事之成败,全在 ...
分类:其他好文   时间:2016-05-20 19:30:39    阅读次数:195
课堂练习-找水王
实验题目: 三人行设计了一个灌水论坛。信息学院的学生都喜欢在上面交流灌水,传说在论坛上有一个“水王”,他不但喜欢发帖,还会回复其他ID发的每个帖子。坊间风闻该“水王”发帖数目超过了帖子数目的一半。如果你有一张当前论坛的帖子(包括回帖)列表,其中帖子的作者的ID也在其中,你能快速的找到这个传说中的水王 ...
分类:其他好文   时间:2016-05-20 19:31:11    阅读次数:119
实现文件的复制
...
分类:其他好文   时间:2016-05-20 19:29:35    阅读次数:123
Oozie 生成JMS消息并向 JMS Provider发送消息过程分析
一,涉及到的工程 从官网下载源码,mvn 编译成 Eclipse工程文件: 对于JMS消息这一块,主要涉及到两个工程: oozie-core工程有问题的原因是还需要一些其他的依赖工程未导入: 二,Oozie 生成 JMS消息 主要涉及到的一些类 oozie-core 工程中的: oozie-clie ...
分类:其他好文   时间:2016-05-20 19:29:16    阅读次数:172
hdu 3572 仪器与任务 最大流 好题 体会建图思想
Task Schedule Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 65536/32768 K (Java/Others)Total Submission(s): 6802 Accepted Submission(s): 2124 P ...
分类:其他好文   时间:2016-05-20 19:30:32    阅读次数:115
快学Scala-第一章 基础
知识点: Scala程序并不是一个解释器,实际发生的是,你输入的内容被快速的编译成字节码,然后这段字节码交由Java虚拟机执行。 以val定义的值是一个常量,以var定义的值是一个变量,声明值或变量但不做初始化会报错。 变量或函数的类型总是写在变量或函数名称的后面。 Scala中,仅当同一行代码中存... ...
分类:其他好文   时间:2016-05-20 19:27:42    阅读次数:245
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!