今天收到了CSDN寄过来的两本书,一本《Hadoop实战手册》,一本《程序员》杂志。内心还是有点小激动的,天还下着小雨,书也被淋湿了点,不过问题不大。
入住CSDN已经有很长一段时间了,一路走来,在CSDN里能学到很多东西,了解到很多前沿的技术,虽然自己不是搞那方面的,但是了解点动态也不失为一件快事。以前我没事的时候会逛微博,也会会刷QQ,刷朋友圈,后来微博基本没怎么逛了,QQ基本不登...
分类:
其他好文 时间:
2016-07-10 18:27:43
阅读次数:
183
如题,或者获取split ID in the mapfunction。
=========================================
InputSplit is = context.getInputSplit();
splitId = MD5Hash.digest(is.toString()).toString();
-----------------------...
分类:
其他好文 时间:
2016-06-10 06:18:56
阅读次数:
282
参考书籍:《Hadoop实战》第二版 第9章:HDFS详解 1. HDFS基本操作 @ 出现的bug信息 @-@ WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using b ...
分类:
其他好文 时间:
2016-06-06 00:39:44
阅读次数:
1185
首先考虑表的自连接,其次是列的设置,最后是结果的整理. 文件内容: 输出结果: 参考:《Hadoop实战》 ...
分类:
其他好文 时间:
2016-05-12 06:53:18
阅读次数:
253
《Hadoop实战》陆嘉恒 《Hadoop - The Definitive Guide》Tom White,中文版《Hadoop权威指南》 《Hadoop技术内幕-深入理解MapReduce架构设计与实现原理》董西成 《Hadoop技术内幕-深入解析HADOOP COMMON和HDFS架构设计与实 ...
分类:
其他好文 时间:
2016-05-10 23:26:40
阅读次数:
124
Hadoop实战实例 Hadoop实战实例 Hadoop 是Google MapReduce的一个Java实现。MapReduce是一种简化的分布式编程模式,让程序自动分布到一个由普通机器组成的超大集群上并发执行。就如同java程序员可以不考虑内存泄露一样, MapReduce的run-time系统 ...
分类:
其他好文 时间:
2016-04-30 12:56:37
阅读次数:
195
Hadoop是什么,为什么要学习Hadoop? Hadoop是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System ...
分类:
其他好文 时间:
2016-04-12 07:07:44
阅读次数:
183
课程大纲及内容简介: 每节课约35分钟,共不下40讲 第一章(11讲) ·分布式和传统单机模式 ·Hadoop背景和工作原理 ·Mapreduce工作原理剖析 ·第二代MR--YARN原理剖析 ·Cloudera Manager 4.1.2安装 ·Cloudera Hadoop 4.1.2 安装 · ...
分类:
其他好文 时间:
2016-04-12 07:06:02
阅读次数:
130
Hadoop是2013年最热门的技术之一,通过北风网robby老师<深入浅出Hadoop实战开发>、<Hadoop应用开发实战>两套课程的学习,普通Java开发人员可以在最快的时间内提升工资超过15000.成为一位完全精通Hadoop应用开发的高端人才。 Hadoop是什么,为什么要学习Hadoop ...
分类:
编程语言 时间:
2016-04-12 07:04:40
阅读次数:
214
Hadoop是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高容错性的特点,并 ...
分类:
其他好文 时间:
2016-04-12 00:11:54
阅读次数:
316