初学编程的人,都知道helloworld的含义,当你第一次从控制台里打印出了helloworld,就意味着,你已经开始步入了编程的大千世界,这和第一个吃螃蟹的人的意义有点类似,虽然这样比喻并不恰当。如果说学会了使用helloworld就代表着你踏入了单机编程的大门,那么学会在分布式环境..
分类:
其他好文 时间:
2015-01-13 01:32:46
阅读次数:
373
初学编程的人,都知道hello world的含义,当你第一次从控制台里打印出了hello world,就意味着,你已经开始步入了编程的大千世界,这和第一个吃螃蟹的人的意义有点类似,虽然这样比喻并不恰当。如果说学会了使用hello world就代表着你踏入了单机编程的大门,那么学会在分布式环境下使用w...
分类:
其他好文 时间:
2015-01-12 22:21:43
阅读次数:
154
需要注意的事情:1. 对于wordcount1.0 ,按照http://www.cloudera.com/content/cloudera/en/documentation/HadoopTutorial/CDH4/Hadoop-Tutorial/ht_usage.html#topic_5_2 执行。...
分类:
其他好文 时间:
2015-01-11 22:49:04
阅读次数:
166
charstring[]="IloveiosIwanttomakeanprojectzpplanou";char*strs[255]={0};inti=0,count=0;intwordcount=0;while(*(string+i)!=‘\0‘){chartemp[100]={0};intk=0;staticintm=0;if(*(string+i)!=‘‘){count++;}else{char*str=malloc(count+1);wordcount++;for(intj=i-count;j<..
分类:
编程语言 时间:
2015-01-11 06:20:52
阅读次数:
154
前面bolg中提到了 eclipse操作单机版的Hbase列子 不熟悉的朋友可以去看看
eclipse 连接并操作单机版Hbase
本篇文章介绍一个 Mapreduce 读取 Hbase 中数据 并进行计算 列子 类似与 wordcount 不过 此时的输入 是从 Hbase中读取
首先 需要创建输入源...
分类:
系统相关 时间:
2015-01-09 17:25:34
阅读次数:
161
1、安装R语言环境
su -c 'rpm -Uvh http://download.fedoraproject.org/pub/epel/6/i386/epel-release-6-8.noarch.rpm'
su -c 'yum install foo'
yum list R-\*
yum ins...
分类:
其他好文 时间:
2015-01-07 16:36:49
阅读次数:
333
**********************3A*************************
简介运算 helloworld
1. 验证 hadoop 安装正常
2. bin/hadoop jar hadoopexamples-1.1.2.jar wordcount in out
3. bin/hadoop dfs -ls ...
分类:
其他好文 时间:
2014-12-30 17:11:17
阅读次数:
180
本文发表于本人博客。今天继续写练习题,上次对分区稍微理解了一下,那根据那个步骤分区、排序、分组、规约来的话,今天应该是要写个排序有关的例子了,那好现在就开始! 说到排序我们可以查看下hadoop源码里面的WordCount例子中对LongWritable类型定义,它实现抽象接口WritableCom...
分类:
编程语言 时间:
2014-12-26 14:35:39
阅读次数:
256
继上篇《Hadoop阅读笔记(一)——强大的MapReduce》对MapReduce进行了理论的阐述,本篇通过WordCount加强版——求平均数以及WordCount阉割版——去重两个案例加深对于MapReduce的理解,了解了map过程、combine过程以及reduce过程,结合数据集完美呈现...
分类:
其他好文 时间:
2014-12-25 23:21:59
阅读次数:
181
Linux系统中的wc(WordCount)命令的功能为统计指定文件中的字节数、字数、行数,并将统计结果显示输出。-c统计字节数。-l统计行数。-w统计字数。
分类:
系统相关 时间:
2014-12-24 18:33:51
阅读次数:
221