Linux 权限真是一大堆呀，在Linux下进行试验，突然来了个tmp磁盘存储不足。。。。。。。。。。。。。。。。。。
然而，我却没有权限给tmp增加容量。。。。。。。。。。。。。
只有修改配置文件了！！！！！！！！！！！
===================================================================
编辑conf/core-site...
分类：
系统相关 时间：
2016-03-18 07:15:25
阅读次数：
278
下面内容主要摘抄于<<Hadoop实战>>,红色高亮部分是本人添加的白话注释. Zookeeper 是一种高性能、可扩展的服务。 Zookeeper 的读写速度非常快，并且读的速度要比写的速度更快。另外，在进行读操作的时候， ZooKeeper 依然能够为旧的数据提供服务。这些都是由于 ZooKee
分类：
其他好文 时间：
2016-01-29 12:14:42
阅读次数：
184
前面我们学习了MapReduce编程思想和编程示例，那么本节课程同学们一起操练操练，动手完成下面的项目。项目需求一本英文书籍包含成千上万个单词或者短语，现在我们需要在大量的单词中，找出相同字母组成的所有anagrams(字谜)。数据集下面是一本英文书籍截取的一部分单词内容。猛戳此链接下载数据集ini...
分类：
其他好文 时间：
2016-01-20 17:14:35
阅读次数：
224
课程观看地址：http://www.xuetuwuyou.com/course/62课程出自学途无忧网：http://www.xuetuwuyou.com一、软件版本Centos6.5、VMware10CDH5.2.0（Hadoop2.5.0）Hive-0.13sqoop-1.4.5二、学完课程之后，您可以：①、一个人搞定企业Hadoop平台搭建和运维工作；界面化高效运维和监..
分类：
其他好文 时间：
2016-01-04 17:04:21
阅读次数：
219
setup函数原码:（摘自《hadoop实战》）*Calledonceatthestartofthetask.protectedvoidsetup(Contextcontext)throwsIOException,InterruptedException{}从注释可得知，setup函数在Task启动时就调用。在MapReduce中作业会被组织成MapTask和ReduceTask。每个Task都以Map类或Reduce..
分类：
其他好文 时间：
2015-12-31 10:39:19
阅读次数：
409
1. 简单介绍 參见《Hadoop in Action》P102 以及 《Hadoop实战（第2版）》（陆嘉恒）P69 2. 案例 网上大部分的说明不过依照《Hadoop in Action》中的演示样例代码给出。这里是Hadoop0.20.2版本号，在该版本号中已经实现了BloomF...
分类：
其他好文 时间：
2015-12-23 10:50:36
阅读次数：
215
为大型数据文件每行只能产生id4个主要思路：1 单线程处理2 普通多线程3 hive4 Hadoop搜到一些參考资料《Hadoop实战》的笔记-2、Hadoop输入与输出https://book.douban.com/annotation/17068812/TextInputFormat：文件偏移量...
分类：
其他好文 时间：
2015-09-18 18:15:06
阅读次数：
205
Hadoop0.20.2 Bloom filter应用示例2014-06-04 11:55451人阅读评论(0)收藏举报1. 简介 参见《Hadoop in Action》P102 以及 《Hadoop实战（第2版）》（陆嘉恒）P69 2. 案例 网上大部分的说明仅仅是按照《Hadoo...
分类：
其他好文 时间：
2015-08-20 14:57:49
阅读次数：
266
前言： 都说现在是草根为尊的时代，近年来hadoop及spark技术在国内越来越流行。而且渐渐现成为企业的新宠。在DT时代全面来临之前，能提早接触大数据的技术必然能先人一步。本文作为Hadoop系列的第一篇，将HDFS和MapRed两个技术核心用2个实例简单实现一些，希望能供hadoop入门的朋友....
分类：
其他好文 时间：
2015-08-07 21:51:27
阅读次数：
152
一、基础知识（里面的内容包含大部分的Hadoop的内容，耐心的看完，肯定有收获，如有不同可留言或者上某度）1、Hadoop生态系统介绍(1)HBaseNosql 数据库，key-value存储最大化利用内存(2)HDFS简介：Hadoop distribute file system 分布式文件系统...
分类：
其他好文 时间：
2015-07-26 19:11:18
阅读次数：
120
