如果通过命令行的方式安装cloudera 版本的hadoop,下载它的cdh版本。 解压后执行，你会发现报warning,没有native的库，lib/native是空的。 如何获取native的文件呢？ 1.cdh里面有src文件，可以编译生成native的包，不过这种方式非常难搞，需要网络环境，...
分类：
其他好文 时间：
2015-12-14 21:18:31
阅读次数：
182
工欲善其事，必先利其器，啥都不说，Hadoop下载：http://archive.cloudera.com/cdh5/cdh/5/ 选择好相应版本搞起，在本文讲述的是 围绕hadoop-2.3.0-cdh5.1.2版本安装过程。（安装环境为自己在VMWare10里面搭建的三台Linux虚拟机）。1、...
分类：
其他好文 时间：
2015-12-04 20:36:36
阅读次数：
147
1.1 说明CDH官方有具体安装部署文档，及步骤详情http://www.cloudera.com/content/cloudera/zh-CN/documentation/core/v5-3-x/topics/installation_installation.html此处为第一种方式Cloude...
分类：
其他好文 时间：
2015-11-25 13:16:56
阅读次数：
336
Hadoop Linux安装步骤流程 1.硬件准备 2.软件准备（推荐CDH） 3.将Hadoop安装包分发到各个节点下 4.安装JDK 5.修改/etc/hosts配置文件 6.设置SSH免密码登陆 7.修改配置文件 8.启动服务 9.验证 1.下载软件 1.1 apache版本 下载链接：h.....
分类：
系统相关 时间：
2015-11-24 14:31:42
阅读次数：
164
一、hadoop2.0安装部署流程 1、自动安装部署：Ambari、Minos（小米）、Cloudera Manager（收费） 2、使用RPM包安装部署：Apache hadoop不支持、HDP与CDH提供 3、使用jar包安装部署：各版本均提供。（初期为了理解hadoop，建议使用这种方式） 部...
分类：
其他好文 时间：
2015-11-15 23:16:32
阅读次数：
259
适用场景：1.大型集群中的应用服务器只能内网访问2.希望保持稳定的本地存储库,保证成员服务器统一安装3.避免因为国外yum源或者国内源网络不佳的情况访问服务器配置：创建应用本地yum源配置文件，确保网络正常访问公网源，以CDH为例[root@vm03~]#cat/etc/yum.repos.d/cdh.repo
[..
分类：
其他好文 时间：
2015-11-13 19:09:55
阅读次数：
328
1.环境说明master192.168.0.223mesos-masterslave192.168.0.225mesos-salve2.环境准备关闭防火墙关闭selinux两台机器修改主机名master/slave设置hosts，能互相解析3.master和slave配置ssh互信这里配置hadoop用户双机互信，因为hadoop用hadoop用户启动master
yum-yinstallsshpas..
分类：
其他好文 时间：
2015-11-10 19:39:15
阅读次数：
386
前置条件已经成功安装配置Hadoop和Mysql数据库服务器，如果将数据导入或从Hbase导出，还应该已经成功安装配置Hbase。下载sqoop和Mysql的JDBC驱动sqoop-1.2.0-CDH3B4.tar.gz：http://archive.cloudera.com/cdh/3/sqoop...
分类：
其他好文 时间：
2015-11-06 16:14:24
阅读次数：
247
val conf = HBaseConfiguration.create() conf.addResource(new Path("/opt/cloudera/parcels/CDH-5.4.4-1.cdh5.4.4.p0.4/lib/hbase/conf/hbase-site.xml")) ...
分类：
其他好文 时间：
2015-11-06 11:21:27
阅读次数：
390
