原文地址：http://my.oschina.net/lanzp/blog/309078目录[-]1、开发配置环境：2、Hadoop服务端配置（Master节点）3、基于Eclipse的Hadoop2.x开发环境配置4、运行Hadoop程序及查看运行日志1、开发配置环境：开发环境：Win7（64bi...
分类：
系统相关 时间：
2014-09-04 14:34:59
阅读次数：
491
hadoop学习笔记之--完全分布模式安装 Hadoop完全分布式模式安装步骤 Hadoop模式介绍 单机模式：安装简单，几乎不用作任何配置，但仅限于调试用途 伪分布模式：在单节点上同时启动namenode、datan...
分类：
其他好文 时间：
2014-09-02 20:02:55
阅读次数：
368
1、开发配置环境： 开发环境：Win7（64bit）+Eclipse（kepler service release 2） 配置环境：Ubuntu Server 14.04.1 LTS（64-bit only） 辅助工具：WinSCP + Putty Hadoop版本：2.5.0 Hadoop的Eclipse开发插件（...
分类：
系统相关 时间：
2014-09-02 12:42:25
阅读次数：
343
执行文件拷贝操作 拷贝后的“input”文件夹的内容如下所示： 和我们的hadoop安装目录下的“conf”文件的内容是一样的。 现在，在我们刚刚构建的伪分布式模式下运行wordcount程序： 运行完成后我们查看一下输出的结...
分类：
其他好文 时间：
2014-08-27 13:13:48
阅读次数：
314
执行文件拷贝操作拷贝后的“input”文件夹的内容如下所示：和我们的hadoop安装目录下的“conf”文件的内容是一样的。现在，在我们刚刚构建的伪分布式模式下运行wordcount程序：运行完成后我们查看一下输出的结果：部分统计结果如下：此时我们到达Hadoop的web控制台会发现我们提交并成功的...
分类：
其他好文 时间：
2014-08-27 12:49:47
阅读次数：
236
前言 ZooKeeper是Hadoop家族的一款高性能的分布式协作的产品。在单机中，系统协作大都是进程级的操作。分布式系统中，服务协作都是跨服务器才能完成的。在ZooKeeper之前，我们对于协作服务大都使用消息中间件，随...
分类：
其他好文 时间：
2014-08-25 17:23:04
阅读次数：
297
第四步：配置Hadoop伪分布模式并运行Wordcount示例伪分布模式主要涉及一下的配置信息：修改Hadoop的核心配置文件core-site.xml，主要是配置HDFS的地址和端口号；修改Hadoop中HDFS的配置文件hdfs-site.xml，主要是配置replication;修改Hadoo...
分类：
其他好文 时间：
2014-08-25 16:51:54
阅读次数：
267
在虚拟机中用rhel6.5装了单机伪分布式的Hadoop，在宿主机中使用JAVA API开发程序，遇到了一些问题及解决：1、连接不上关掉iptables，最简单粗暴的方法设置策略，允许远程访问端口才是正确的解决方式，具体方式还要学习。注意：要在root下调用哦#> service iptables ...
分类：
其他好文 时间：
2014-08-24 16:34:52
阅读次数：
192
Hadoop的伪分布式安装步骤使用root用户登录1.1设置静态ip在centos桌面右上角的图标上，右键修改。重启网卡，执行命令servicenetworkrestart验证：执行命令ifconfig1.2修改主机名修改当前会话中的主机名，执行命令hostnamehadoop(要修改的主机名称)修...
分类：
其他好文 时间：
2014-08-20 15:56:52
阅读次数：
190
下面介绍myeclipse与hadoop的集成。我用的myeclipse版本是8.5.1、安装hadoop开发插件在hadoop1.2.1版本的安装包contrib/目录下，已经不再提供hadoop-eclipse-pligin-1.2.1.jar;而是提供了源代码文件，需要我们自行重新编译成jar...
