部署笔记环境准备1）JDK2）本地cdhyum源省.....3）本地hosts10.20.120.11sp-kvm01.hz.idc.com10.20.120.12sp-kvm02.hz.idc.com10.20.120.13sp-kvm03.hz.idc.com10.20.120.14sp-kvm04.hz.idc.com10.20.120.21hd01.hz.idc.com10.20.120.22hd02.hz.idc.com10.20.120.31hd-node01.h..
分类：
其他好文 时间：
2014-12-12 10:17:42
阅读次数：
331
1.1 设置ip地址 执行命令 service network restart 验证: ifconfig1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables status1.3 关闭防火墙的自动运行 执行命令 chkconfig ipt....
分类：
其他好文 时间：
2014-12-10 17:41:36
阅读次数：
248
Hadoop核心项目：HDFS（Hadoop Distributed File System分布式文件系统），MapReduce（并行计算框架）
HDFS架构的主从结构：主节点，只有一个namenode，负责接收用户操作请求，维护文件系统的目录结构，管理文件与block之间关系，block与datanode之间的关系。
从节点，有很多个datanodes，负责存储文件，文件被分成block存储...
分类：
其他好文 时间：
2014-12-08 09:23:22
阅读次数：
231
准备环境 1 安装好了Hadoop，之前安装了Hadoop 2.5.0，安装参考http://www.cnblogs.com/liuchangchun/p/4097286.html 2 安装Eclipse，这个直接在其官网下载即可安装步骤 1 下载Eclipse插件，我找的是Hadoop 2....
分类：
系统相关 时间：
2014-11-25 22:47:06
阅读次数：
277
1. 编辑WordCount.java文件，在下载的hadoop安装包里有WordCount的例子http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.2.0/hadoop-2.2.0.tar.gz2. 把WordCount编译成一个jar...
分类：
其他好文 时间：
2014-11-22 16:01:23
阅读次数：
166
VMware中创建多台centos虚拟机，搭建安装运行Hadoop的基础环境。
分类：
其他好文 时间：
2014-11-16 13:16:55
阅读次数：
255
1：环境准备 1台linux服务器, hadoop安装包（apache官方网下载） jdk1.6+2：安装jdk ，配置好环境变量（etc/profile）,java -version 测试正确进行下一步。3：配置ssh免密码登录 cd ~ ssh-keygen -t rsa 产生密钥，位于~/.....
分类：
系统相关 时间：
2014-11-14 14:12:16
阅读次数：
229
因为本人最近最近一段时间 都在学习Hadoop，接触了比较多的理论，但是想要深入的去学习Hadoop整个平台，那就必须实战的训练，首先第一步，当然是先搭建好一个Hadoop平台为先。但是比较坑爹的是，Hadoop是要求安装在Linux环境下的，在Windows下是不能直接运行的。所以只能在Windows下搞个Cygwin，然后把Hadoop安装包往里面扔了。我对Cygwin的印象一直不是很好，以前...
说明：hadoop安装，一共有三种部署方式，分别是本地部署、伪分布部署、集群部署。这里我们以伪分布模式为例进行讲解。软件：Myeclipse-2014-GA，hadoop-2.5.1.tar.gz，hadoop-eclipse-plugin-2.5.0.jar软件下载地址：链接: http://pa...
分类：
编程语言 时间：
2014-11-09 19:28:31
阅读次数：
179
1、安装1.1、下载hadoop-2.5.1.tar.gz1.2、解压至安装目录tar -zxv -f hadoop-2.5.1.tar.gz -C ../soft/1.3、配置hadoop相关配置文件vim .bashrc##添加JAVA配置export JAVA_HOME=/usr/xuelu....
分类：
其他好文 时间：
2014-11-09 18:02:11
阅读次数：
218
