1、需把hadoop.dll和winutils.exe放到hadoop的bin目录下，我的是：E:\Hadoop\hadoop-2.4.0\bin2、且需要配置HADOOP_HOME和PATH路径。我的如下：HADOOP_HOME——E:\Hadoop\hadoop-2.4.0PATH——.;%HADOOP_HOME%\bin;以上两个注意项可以解决运行wordcount报空指针异常的错误。3、..
一，安装java环境添加java环境变量vi /etc/profile# add by tankexport JAVA_HOME=/data/soft/jdk/jdk1.7.0_71export JRE_HOME=$JAVA_HOME/jreexport CLASSPATH=.:$JAVA_HOME...
分类：
其他好文 时间：
2014-12-19 00:20:57
阅读次数：
213
1、 需要下载hadoop的专门插件jar包hadoop版本为2.3.0，hadoop集群搭建在centos6x上面，插件包下载地址为：http://download.csdn.net/detail/mchdba/8267181，jar包名字为hadoop-eclipse-plugin-2.3.0，...
网上有一些都是在Linux下使用安装Eclipse来进行hadoop应用开发，但是大部分Java程序员对linux系统不是那么熟悉，所以需要在windows下开发hadoop程序，所以经过试验，总结了下如何在windows下使用Eclipse来开发hadoop程序代码。 1、 需要下载hadoop的专门插件jar包hadoop版本为2.3.0，hadoop集群搭建在centos6x上面，插件包下载...
Observer：让ZooKeeper更具有伸缩性一、ZooKeeper中Observer1.1 ZooKeeper角色经过前面的介绍，我想大家都已经知道了在ZooKeeper集群当中有两种角色Leader和Follower。Leader可以接受client请求，也接收其他Server转发的写请求，...
分类：
其他好文 时间：
2014-12-16 11:26:18
阅读次数：
232
Step 1：选择Hadoop版本对应的Eclipse插件jar包（可自行编译），我的Hadoop版本是hadoop-0.20.2，对应的插件应该是：hadoop-0.20.2-eclipse-plugin.jar。然后将jar包放到eclipse\dropins目录下，然后启动eclipse，如图...
分类：
系统相关 时间：
2014-12-04 19:46:59
阅读次数：
370
介绍怎样搭建用eclipse开发调试Hadoop的环境...
分类：
其他好文 时间：
2014-12-02 22:33:39
阅读次数：
193
1、 软件环境
a) Eclipse
b) 运行中的hadoop集群
2、 eclipse上安装hadoop插件
a) 首先将eclipse Hadoop的插件放置到eclipse/plugins目录下，重启eclipse
b) 如果插件安装成功，打开Windows—Preferences后，在窗口左侧会有Hadoop Map/...
分类：
系统相关 时间：
2014-12-02 00:09:10
阅读次数：
299
hadoop eclipse插件生成
做了一年的hadoop开发，还没有自己主动生成过eclipse插件，一直都是在网上下载别人的用，今天有时间，就把这段遗憾补回来，自己生成一下，废话不说，开始了。
一、环境说明
本列中的hadoop eclipse插件通过eclipse生成（未使用命令生成是因为用命令生成插件过程中发生的一些问题，不容易查看和修改，用eclipse很直观，方便出错校正）...
分类：
系统相关 时间：
2014-11-13 19:03:38
阅读次数：
175
假设你有上百G的数据，你要统计出这些数据中，含有某些你感兴趣的内容的数据的有多少条，你会怎么做？在硬件条件允许的情况下，用hadoop并行计算是一个不错的选择。为了使本文得以清晰地说明，我们不妨假设如下的情况：我们有100G的数据，分别保存在5个文件中，它们位于 /data/ 目录下。这5个数据文件...
分类：
编程语言 时间：
2014-11-07 22:04:33
阅读次数：
287
