本文介绍如何使用eclipse查看和编译hadoop源码...
分类:
系统相关 时间:
2014-12-10 09:18:26
阅读次数:
204
64bit Centos编译hadoop-2.5.1
1、说明
a) 由于从apache下载下来的tar.gz包是用32 bit编译的,所有如果用Linux 64作为hadoop的平台,将会出现一些问题,所以需要手动的编译成64 bit
2、软件准备
a) JDK jdk1.7.0_51
b) Hadoophardoop-2.5.1-src.tar...
分类:
其他好文 时间:
2014-11-12 11:50:35
阅读次数:
205
在http://www.aboutyun.com/thread-8130-1-1.html 这里看到到,安装过程遇到了上面说的问题,所以将此文转载过来,以备不时之需,感谢此作者。问题导读:1.如果获取hadoop srcmaven包?2.编译hadoop需要装哪些软件?3.如何编译hadoop2.4...
分类:
系统相关 时间:
2014-11-10 17:18:21
阅读次数:
330
Apache Hadoop生态系统安装包下载地址:http://archive.apache.org/dist/软件安装目录:~/appjdk: jdk-7u45-linux-x64.rpmhadoop: hadoop-2.5.1-src.tar.gzmaven: apache-maven-3.0....
分类:
系统相关 时间:
2014-11-08 21:56:08
阅读次数:
357
1、Hadoop 项目的四大模块
Hadoop Common: The common utilities that support the other Hadoop modules.Hadoop Distributed File System (HDFS?): A distributed file system that provides high-throughput access to...
分类:
其他好文 时间:
2014-11-02 22:38:57
阅读次数:
396
前言: 毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了。对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环境跑起来,然后在能用的基础上在多想想为什么。 通过这三个礼拜(基本上就是周六周日,其他时间都在加班啊T ...
分类:
系统相关 时间:
2014-10-12 16:15:18
阅读次数:
262
编译 hadoop 版本的命令如下,可以直接使用 make-distribution.sh 脚本来编译,命令如下:
./make-distribution-noclean.sh --tgz -Pyarn -Phive -Phadoop-2.4 -Dhadoop.version=2.4.0
然后就在当前目前会生成一个 tgz 的文件。
如果是编译 cdh 版本的话,参考命令如下:
./mak...
分类:
其他好文 时间:
2014-10-11 15:19:35
阅读次数:
204
Linux环境下(ubuntu)如何编译hadoop2.42014年06月15日?Hadoop,Linux? 共 5180字 ? 字号小中大?暂无评论? 阅读 17 views 次问题导读:1.如果获取hadoop src maven包?2.编译hadoop需要装哪些软件?3.如何编译hadoop2...
分类:
其他好文 时间:
2014-10-05 12:08:58
阅读次数:
306
编译环境准备:1、安装cmake:sudo wget http://www.cmake.org/files/v2.8/cmake-2.8.12.2.tar.gz#tar -zxvf cmake-2.8.12.2.tar.gz#cd cmake-2.8.12.2# ./configure#gmake#...
分类:
其他好文 时间:
2014-09-19 21:01:15
阅读次数:
201
1.系统环境说明 CentOS 7.0 x64 版本 192.168.1.7 master 192.168.1.8 slave 192.168.1.9 slave 192.168.1.10 slave 2.安装前的准备工作 2.1 关闭防火墙 #?systemctl?status?firewalld.service??--查看防火墙...
分类:
其他好文 时间:
2014-09-15 13:02:39
阅读次数:
387