环境
系统：Ubuntu 14.04
hadoop版本：2.6.0
hbase版本：1.0
jdk版本：1.8
下载地址：Apache上慢慢找吧~~
jdk的环境配置这里就不列出来了，首先讲一下hadoop配置吧。
hadoop安装
1.安装位置：/opt
2.创建hadoop用户组
sudo addgroup hadoop
3.创建hadoop用户
sudo addu...
分类：
其他好文 时间：
2015-04-20 00:38:25
阅读次数：
199
从mapReduce第一次作业到现在第二次作业，再到老板留下任务，做RS的属性约简。配置mac和Ubuntu花了不知多少时间和精力，中间甚至出现过特别消极的情绪。各种蛋疼的问题随之出现。1. 刚开始在Mac上配置了Hadoop，安装了Eclipse，因此很自然的想到把Eclipse配置一下，希望.....
分类：
其他好文 时间：
2015-04-18 11:16:45
阅读次数：
120
傻瓜版的hadoop安装教程。一、 Hadoop准备篇：Hadoop运行软件环境：1. SSH及 SSHD服务正常运行2. JDK如果没装，可以自己安装一下：Sudo yum –y install jdk –b current二、 Hadoop基础篇（安装完成单节点Hadoop）1. 源代码下载1....
分类：
其他好文 时间：
2015-04-15 13:17:28
阅读次数：
312
刚开始接触，不太熟悉，做个小纪录，以后修正生成公钥和私钥ssh-keygen-tdsa-P‘‘-f~/.ssh/id_dsa将公钥导入authorized_keys文件cat~/.ssh/id_dsa.pub>>~/.ssh/authorized_keys正常情况下此时ssh登陆时将不需要使用密码如果提示：Permissiondenied,pleasetryagain修改ssh..
分类：
系统相关 时间：
2015-04-12 06:50:17
阅读次数：
191
集群分布式Hadoop系统安装及测试
本系统一共有三个节点，一个namenode，两个datanode，IP和主机名对应如下：
192.168.1.19 namenode
192.168.1.7 datanode1
192.168.1.20 datanode2
1、安装配置
1）、安装配置JDK，在三个节点都需要安装，下面...
分类：
其他好文 时间：
2015-04-08 18:15:17
阅读次数：
252
windows下配置hadoop
hadoop 安装包解压，路径不要有特殊字符
lib和bin直接解压出来的不可用，需要自己重新编译
配置环境变量：HADOOP_HOME,path中添加：bin目录
namenode
整个文件系统的管理节点。它维护着整个文件系统的文件目录树，文件/目录的元信息和每个文件对应的数据块列表。接收用户的操作请求。
响应客户端的请求，上传文件：
client申请上传文件，n...
分类：
其他好文 时间：
2015-04-07 09:54:54
阅读次数：
144
最近才开始接触hadoop，最先要做的当然是安装hadoop 了，在安装hadoop之前需要作以下的一些准备
一个linux 环境，我使用vmware的虚拟机环境安装了centos
这个请自己百度一下吧，确实是太大了
jdk 1.6 以上的linux安装包
hadoop 2.6.0的安装包
注意，我使用的64位的linux，所以用的Java是64位的安装包
http://pan...
分类：
其他好文 时间：
2015-04-06 21:50:41
阅读次数：
213
有几台dell r720xd的服务器用于hadoop安装，每台机器都有10块3T的硬盘，不需要做raid。由于机器使用的raid卡位dell的r710卡，经咨询dell，r710卡必须做raid才能识别硬盘，其建议将没块盘都做raid0，q... 10块盘整整做了我半个小时。系统安装完后，需要对sd...
分类：
其他好文 时间：
2015-04-03 10:51:20
阅读次数：
122
前言：我使用了两台计算机进行集群的配置，如果是单机的话可能会出现部分问题。首先设置两台计算机的主机名 root 权限打开/etc/host文件再设置hostname,root权限打开/etc/hostname文件设置从机设为Slaver.Hadoop1.安装java jdk 并配置环境 cento....
分类：
其他好文 时间：
2015-03-31 00:32:57
阅读次数：
170
1 安装
＃brew install hadoop
安装的是2.6.0，目录为/usr/local/Cellar/hadoop,如果想安装其他版本，则下载tar包解压即可。地址：http://mirrors.cnnic.cn/apache/hadoop/common/
2 配置
将hadoop可执行路径bin和sbin都配置到环境变量中
export HADOOP_HOME=/usr/l...
分类：
系统相关 时间：
2015-03-30 09:25:29
阅读次数：
218
