在运行hadoop的官方Wordcount程序时报错java.lang.ClassNotFoundException: WordCount$TokenizerMapper提示信息为找不到TokenizerMapper类，但程序师官方的，应该没错。打包到Linux上可以运行，确定不是程序的错。然后在网...
分类：
移动开发 时间：
2014-11-21 18:31:54
阅读次数：
482
package com.my.mapreduce.wordcount;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org....
分类：
其他好文 时间：
2014-11-19 21:44:52
阅读次数：
123
Ubuntu下使用Eclipse和hadoop进行MapReduce程序的开发...
分类：
系统相关 时间：
2014-11-19 11:09:33
阅读次数：
197
Ubuntu下使用Eclipse和hadoop进行MapReduce程序的开发...
分类：
系统相关 时间：
2014-11-19 00:57:19
阅读次数：
195
也可以查看一下SparkWorker2上的运行情况：我们点击具体的Container查看其信息：程序运行结束后我们可以执行一下命令查看运行结果：也可通过HDFS控制台查看运行结果：可以通过Web控制的JobHistory查看历史工作记录：点击最近运行的WordCount作业进入历史作业详情：发现我们...
分类：
其他好文 时间：
2014-11-17 21:01:18
阅读次数：
164
文本排序sort-n：数值排序-r：降序-t：字段分隔符-k：以哪个字段为关键字进行排序-u：排序后相同的行只显示一次相邻才比较相同-f：排序时忽略字符大小写uniq-c：显示文件中行重复的次数-d：只显示重复的行文本统计：wc（wordcount）行数，单词数，字节数-l-w-c-L字符处理命令：..
分类：
其他好文 时间：
2014-11-14 15:58:40
阅读次数：
237
也可以查看一下SparkWorker2上的运行情况：我们点击具体的Container查看其信息：程序运行结束后我们可以执行一下命令查看运行结果：也可通过HDFS控制台查看运行结果：可以通过Web控制的JobHistory查看历史工作记录：点击最近运行的WordCount作业进入历史作业详情：发现我们...
分类：
其他好文 时间：
2014-11-13 22:10:09
阅读次数：
193
结束historyserver的命令如下所示： ? 第四步：验证Hadoop分布式集群 首先在hdfs文件系统上创建两个目录，创建过程如下所示： Hdfs中的/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件，程序运行的...
分类：
其他好文 时间：
2014-11-13 13:10:19
阅读次数：
166
上传两个文件到hdfs上的input文件夹下
代码如下：
import java.io.IOException;
import java.util.StringTokenizer;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io...
分类：
系统相关 时间：
2014-11-10 13:47:40
阅读次数：
179
IDE：eclipseSpark:spark-1.1.0-bin-hadoop2.4scala:2.10.4创建scala工程，编写wordcount程序如下package com.luogankun.spark.baseimport org.apache.spark.SparkConfimport...
分类：
编程语言 时间：
2014-11-09 23:29:11
阅读次数：
231
