基于王家林老师独创的人工智能“项目情景投射”学习法，任何IT人员皆可在无需数学和Python语言的基础上的情况下3个月左右的时间成为AI技术实战高手 ...
分类：
微信 时间：
2018-05-01 23:42:40
阅读次数：
247
该视频教程共22讲，由王家林老师主讲。 第01讲：为什么会有第一代大数据技术Hadoop和第二代大数据技术Spark？ 第02讲：10分钟从技术角度理解Hadoop 第03讲：Hadoop集群安装解析 第04讲：Hadoop集群构建硬件选择、集群规模、网络拓扑、机架感知等 第05讲：Hadoop集群 ...
分类：
其他好文 时间：
2017-08-14 10:12:38
阅读次数：
190
Spark分区详解！DT大数据梦工厂王家林老师亲自讲解！http://www.tudou.com/home/_79823675/playlist?qq-pf-to=pcqq.group一、分片和分区的区别？分片是从数据角度，分区是从计算的角度，其实都是从大的状态，split成小的。二、spark分区理解rdd作为一个分布式的数据集，是分布..
分类：
其他好文 时间：
2016-11-12 20:34:14
阅读次数：
333
Spark开源框架精彩学习资源分享——DT大数据梦工厂王家林知识类：https://github.com/JerryLead/SparkInternals（https://github.com/JerryLead/SparkLearning）
https://github.com/databricks/spark-knowledgebasehttps://github.com/knoldus/Play-Spark-Scala接口类：https:..
分类：
其他好文 时间：
2016-11-10 21:36:41
阅读次数：
230
最近学习王家林老师的大数据蘑菇云行动，要实现将SparkStreaming分析的数据写入到Redis。今天正好开始入手。一、Ubuntu16安装Redis3.2.1遇到了不少的问题，其中，make倒是没问题，maketest的时候，出现了：!!!WARNINGThefollowingtestsfailed:***[err]:Slaveshouldbeabletosync..
王家林老师的课程：2016年大数据Spark“蘑菇云”行动之sparkstreaming消费flume采集的kafka数据Directf方式作业。一、基本背景Spark-Streaming获取kafka数据的两种方式Receiver与Direct的方式，本文介绍Direct的方式。具体的流程是这样的：1、Direct方式是直接连接到kafka的节..
分类：
Web程序 时间：
2016-10-02 07:20:52
阅读次数：
261
近期，听了王家林老师的2016年大数据Spark“蘑菇云”行动，需要将flume，kafka和Sparkstreaming进行整合。感觉一时难以上手，还是先从简单着手吧：我的思路是这样的，flume产生数据，然后输出到sparkstreaming，flume的源数据是netcat（地址：localhost，端口22222），输出是av..
分类：
Web程序 时间：
2016-10-01 06:31:51
阅读次数：
209
压缩过的大数据Spark蘑菇云行动前置课程视频百度云分享链接 链接：http://pan.baidu.com/s/1cFqjQu SCALA专辑 Scala深入浅出经典视频 链接：http://pan.baidu.com/s/1i4Gh3Xb 密码：25jc DT大数据梦工厂大数据spark蘑菇云S ...
分类：
其他好文 时间：
2016-08-26 21:13:46
阅读次数：
390
大数据科学丛书系列的最新一本《Scala语言基础与开发实战》即将面市，预计月底上架。内容还是不错的，文笔简介，内容实用，值得学、用。大数据资深培训师王家林新作。详细介绍大数据开发语言Scala及其在分布式框架Akka和Kafka中的应用。秉承“实战”类图书特点，解析大量代码的..
分类：
编程语言 时间：
2016-07-07 17:41:26
阅读次数：
280
（摘自王家林）
流（Streaming），在大数据时代为数据流处理，就像水流一样，是数据流；既然是数据流处理，就会想到数据的流入、数据的加工、数据的流出。
日常工作、生活中数据来源很多不同的地方。例如：工业时代的汽车制造、监控设备、工业设备会产生很多源数据；信息时代的电商网站、日志服务器、社交网络、金融交易系统、黑客攻击、垃圾邮件、交通监控等；通信时代的手机、平板、智能设备、物联网等会...
分类：
其他好文 时间：
2016-05-19 15:16:14
阅读次数：
353
