linux中 首先需要先安装jdk并配置相应的环境变量 通过wget方式下载hadoop1.2.1版本,如果是生产环境使用建议使用1.*版本,因为2.*版本刚推出没多久,比较不稳定 下载地址 http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1
分类:
其他好文 时间:
2016-01-30 17:46:24
阅读次数:
136
参考http://blog.csdn.net/lalaguozhe/article/details/10912527 环境:hadoop2.3cdh5.0.2 hive 1.2.1 目标:安装lzo 测试作业运行与hive表创建使用lzo格式存储 之前安装试用snappy的时候,发现cdh解压后的n...
分类:
其他好文 时间:
2016-01-23 10:20:16
阅读次数:
196
Required SoftwareJava? must be installed. Recommended Java versions are described atHadoopJavaVersions.ssh must be installed and sshd must be running ...
分类:
其他好文 时间:
2016-01-11 12:06:45
阅读次数:
143
启动datanode失败启动命令:/data/hadoop/sbin/hadoop-daemon.sh start datanode查看日志有条FATAL日志:vi /data/hadoop/logs/hadoop-root-datanode-slave2.log......2016-01-06 2...
分类:
其他好文 时间:
2016-01-06 21:37:12
阅读次数:
162
环境如下: Centos6.5 Apache Hadoop2.7.1 Apache Hbase0.98.12 Apache Zookeeper3.4.6 JDK1.7 Ant1.9.5 Maven3.0.5 最近在测Hbase的压缩,Hadoop安装了lzo和snappy,插入50条文本数据,每条数...
分类:
其他好文 时间:
2016-01-06 11:34:55
阅读次数:
131
Hadoop-2.4.0安装和wordcount执行验证下面描写叙述了64位centos6.5机器下,安装32位hadoop-2.4.0,并通过执行系统自带的WordCount样例来验证服务正确性的步骤。建立文件夹/home/QiumingLu/hadoop-2.4.0,以后这个是hadoop的安装...
分类:
其他好文 时间:
2015-12-26 22:15:13
阅读次数:
279
Hadoop-1.0.4 安装配置一、 安装VMware本人使用的是11.1.2 build-2780323版本不详细讲述。二、 在VMware上安装ubuntu本人使用的是ubuntu 14.10(为了后续步骤的说明,本人在安装时的用户名、密码均定为hadoop)开启虚拟机后,调整时间区域,调整系...
分类:
其他好文 时间:
2015-12-25 17:12:54
阅读次数:
128
初次接触Hadoop,了解了Hadoop安装包的目录结构,和大家分享下:bin:Hadoop最基本的管理脚本和使用脚本的目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用Hadoop。etc:Hadoop配置文件所在的目录,包括core-site,xml、hdf.....
分类:
其他好文 时间:
2015-12-23 07:05:10
阅读次数:
125
参见:http://www.powerxing.com/install-hadoop/完全拷贝至上面网址环境本教程使用 Ubuntu 14.04 64位 作为系统环境(Ubuntu 12.04 也行,32位、64位均可),请自行安装系统。如果用的是 RedHat/CentOS 系统,请查看相应的Ce...
分类:
系统相关 时间:
2015-12-21 07:07:07
阅读次数:
403
一.自己搭建开发环境 今天自己搭建了一套Centos5.3 + Hadoop2.2 + Hbase0.96.1.1的开发环境,Win7 Eclipse调试MapReduce成功。可能是版本比较高的原因,出了问题,网上找不到完整解决方案,只能靠自己。二.Hadoop安装 这个就不啰嗦了,网上大把文章。...