本期内容： 1、Spark Streaming Job生成深度思考 2、Spark Streaming Job生成源码解析 特别感谢王家林老师的独具一格的讲解： 王家林老师名片： 中国Spark第一人 新浪微博：http://weibo.com/ilovepains 微信公众号：DT_Spark 博 ...
分类：
其他好文 时间：
2016-05-13 13:21:43
阅读次数：
174
第99课：使用Spark Streaming 实战对论坛网站动态行为的多维度分析
/* 王家林老师授课http://weibo.com/ilovepains 每天晚上20：00YY频道现场授课频道68917580*/
/**
* *第99课：使用Spark Streaming 实战对论坛网站动态行为的多维度分析
* 论坛数据自动生成代码，该生成的数据会作为Producer的方式发送给...
分类：
编程语言 时间：
2016-05-12 22:46:54
阅读次数：
371
参考
http://hadoop.apache.org/
王家林 DT大数据梦工厂系列 ， 致谢！
网上关于三次工业革命的各种杂乱文章
问题
大数据对程序员意味着什么？
随笔
在这个城市的冬天遇见你...
分类：
其他好文 时间：
2016-05-12 20:15:28
阅读次数：
189
第4课 ：Spark Streaming的Exactly-One的事务处理和不重复输出彻底掌握
/* 王家林老师授课http://weibo.com/ilovepains 每天晚上20：00YY频道现场授课频道68917580*/
Exactly Once的事务处理：
1，数据零丢失：必须有可靠的数据来源和可靠的Receiver，且整个应用程序的metadata必须进行check...
分类：
其他好文 时间：
2016-05-12 12:33:25
阅读次数：
171
王家林：DT大数据梦工厂创始人和首席专家.联系邮箱18610086859@126.com电话：18610086859QQ:1740415547微信号：18610086859spark的核心是sparkcore,sparkstreaming，sparkgraph,sparkmlib其实是构建在sparkcore之上的一个应用程序，如果要构建一个强大的spark应用程序，sparkst..
分类：
其他好文 时间：
2016-05-03 02:08:32
阅读次数：
219
王家林每日大数据语录Spark篇0043（2015.12.15于上海）:Worker在退出的时候会通过ExecutorRunner杀死Executor并且会将运行在当前Worker下的Driver Client删除掉，最终AppClient端的SparkDeploySchedulerBackend会 ...
分类：
其他好文 时间：
2016-04-18 13:32:24
阅读次数：
188
DT大数据梦工厂由王家林老师及其团队打造，旨在为社会培养100万优秀大数据人才，Spark已是目前大数据行业主流数据处理框架和未来趋势。 本篇文章摘抄自CSDN 深入浅出谈开窗函数（一） 作者：黎明前的黑暗 在开窗函数出现之前存在着很多用 SQL 语句很难解决的问题，很多都要通过复杂的相关子查询或者 ...
分类：
其他好文 时间：
2016-04-04 11:29:59
阅读次数：
635
