Hadoop-2.6.0环境搭建所需资源：hadoop-2.6.0.tar.gz Hadoop-2.6.0-src.tar.gz jdk-8u40-linux-i586.tar.gz第一步：先安装配置JDK（如果事先有配置好JDK，这步可以略过） sudo mkdir /usr/lib/jvm su...
分类：
其他好文 时间：
2015-03-19 17:55:26
阅读次数：
199
1 运行模式：单机模式（standalone）： 单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时，Hadoop无法了解硬件安装环境，便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时，Hadoop会完全运行在本地。因为不需要与其他节点交互，单机模式...
分类：
其他好文 时间：
2015-03-18 17:55:24
阅读次数：
124
1 前言：Hadoop 最早是为了在Linux 平台上使用而开发的，但是Hadoop 在UNIX、Windows 和Mac OS X 系统上也运行良好。不过，在Windows 上运行Hadoop 稍显复杂，首先必须安装Cygwin 以模拟Linux 环境，然后才能安装Hadoop。windows下：...
分类：
其他好文 时间：
2015-03-18 17:47:37
阅读次数：
149
搭建伪分布式是在一台机器上模拟分布式部署，方便学习和调试。
1.解压hadoop文件
下载好的hadoop ，我们可以通过使用WinSCP 把压缩包软件把它 从宿主机复制移动到linux 的/usr/local 目录下。
解压缩文件，并重命名为hadoop，方便使用。重命名后这时，hadoop 目录的完整路径是“/usr/local/hadoop”
设置...
分类：
其他好文 时间：
2015-03-02 19:09:59
阅读次数：
121
软件：
hadoop1.1.2、pietty(在windows系统下登录到linux虚拟机的远程登录软件)、winscp（在本地与远程计算机间安全的复制文件）、jdk-6u24-linux-i586.bin、virtualbox上安装的centos
系统（安装过程这里不说了）
安装步骤：
注：避免安装过程出现文件操作权限导致的问题，以下操作在root用户下进行。
1.安装ssh...
分类：
其他好文 时间：
2015-03-01 15:46:13
阅读次数：
173
hadoop安装步骤:
系统需要安装的包
ssh，rpm，gcc，make
yum -y install openssh-server openssh-clients
检测ssh安装和rpm安装
a. ssh localhost
b. yum install rpm
安装java
a. 安装java-7
rpm -Uvh javab. 添加并配置新的jdk系统命令update-alt...
分类：
其他好文 时间：
2015-02-28 13:05:36
阅读次数：
138
jdk版本jdk-7u71-linux-x64.tar.gzhadoop版本hadoop-1.2.1.tar.gzwindow安装hadoop使用cygwin安装格式化hadoop的文件系统HDFS总是不能成功，貌似是乱码因为jkd的安装目录有空格，网上提示建立软链接http://biyutong....
分类：
其他好文 时间：
2015-02-06 16:22:28
阅读次数：
125
以前搭建环境或是配置软件从来都没有留Tips的习惯，但实践证明这是错误的——做过不等于记得怎么做，遇到过的错误也不等于今后就不是错误了。Nutch跟Hadoop的搭建困扰了我很久，但回头看看又觉得真正有些问题的其...
分类：
其他好文 时间：
2014-11-26 21:04:50
阅读次数：
188
搭建参看：
http://blog.csdn.net/w13770269691/article/details/16883663/
查看集群状态：
[root@master bin]# hdfs dfsadmin -report
Configured Capacity: 36729053184 (34.21 GB)
Present Capacity: 13322559491 (12....
分类：
其他好文 时间：
2014-11-06 21:55:25
阅读次数：
252
