cdh5 hadoop redhat 本地仓库配置cdh5 在网站上的站点位置：http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/在RHEL6上配置指向这个repo非常简单，只要把：http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh...
分类：
其他好文 时间：
2014-12-19 15:53:27
阅读次数：
159
cdh hadoop 安装包自动下载脚本下面的shell脚本用于自动下载cdh5.2.1的hadoop rpm包. 测试通过。#!/bin/bash
#
# @file
# cdh5_rhel6_x64_cdh5.2.1-downloads.sh
#
# @date
# 2014-12-18
#
# @author
# cheungmine
#
# @version
# 0.0.1...
分类：
其他好文 时间：
2014-12-18 16:58:02
阅读次数：
639
Ganglia 安装 for centos6.5 x64 cdh5.1.0...
分类：
其他好文 时间：
2014-12-14 22:47:31
阅读次数：
261
离线安装ClouderaManagerExpress--------------------------------###一、安装前提###1.IP地址安排: #cat/etc/hosts 222.31.101.11 cdh5-nn1 222.31.101.13 cdh5-dn1 222.31.101.14 cdh5-dn2 222.31.101.16 cdh5-dn3###二、安装步骤###1.关闭防火墙并设为开机不启动 serv..
分类：
其他好文 时间：
2014-12-04 18:16:58
阅读次数：
258
环境：centos6.5 、cdh5.1.3一、hadoop命令找不到hbase相关类(一)观察hadoop classpath的输出：1，classpath包含了/etc/hadoop/conf，这是hadoop当前使用的配置文件的目录。2，classpath以*结尾， (二)，找到hbase相....
分类：
其他好文 时间：
2014-12-02 17:10:34
阅读次数：
274
引言
Oozie是Hadoop生态系统中的工作流控制组件，可以调度MR，Hive，Shell等各类任务，并配置复杂的工作流程。
今天介绍如何安装部署，使用的是单机测试环境。
欢迎转载，请注明来源：
下载解压
下载安装过程需要的相关文件：
oozie4.0.0安装包
http://archive.cloudera.com/cdh5...
分类：
其他好文 时间：
2014-11-21 20:36:49
阅读次数：
346
由于目前公司大量的数据存储在HBase中，各个业务线需要对HBase进行即时查询，但是又不方便实现自己的基于HBase Client的API的数据访问实现，他们希望能够像Hive对HDFS中的数据进行ETL一样，可以对HBase中的数据进行SQL操作 我们最初考虑的方式是Hive On HBa...
分类：
其他好文 时间：
2014-11-21 12:27:24
阅读次数：
190
upgrade小结：1.dfsadmin-upgradeProgressstatus在cdh5.2.0中没有，在4.6.0有（见源码org.apache.hadoop.hdfs.tools.DFSAdmin）升级的时候不能通过这个看到升级状态rollingUpgrade这个参数在4.6.0中不存在，在5.2.0中有，可以用于滚动升级2.在cdh5.2.0中执行upgrade,nn中调用的..
分类：
其他好文 时间：
2014-11-20 01:40:36
阅读次数：
268
【时间】2014年11月18日【平台】Centos 6.5【工具】scp【软件】jdk-7u67-linux-x64.rpm spark-worker-1.1.0+cdh5.2.0+56-1.cdh5.2.0.p0.35.el6.noarch.rpm spark-core-1.1.0+c...
分类：
其他好文 时间：
2014-11-18 17:22:52
阅读次数：
515
从业务发展需求，大数据平台需要使用spark作为机器学习、数据挖掘、实时计算等工作，所以决定使用Cloudera Manager5.2.0版本和CDH5。
以前搭建过Cloudera Manager4.8.2和CDH4，在搭建Cloudera Manager5.2.0版本的时候，发现相应的Service Host Monitor 和 Service Monitor不能配置外部表，刚开是还以为是配置出错，后来才发现应该是新版本的Cloudera的存储改变方式了。查了很多文档，果然发现，新版本中Service ...
分类：
数据库 时间：
2014-11-14 12:39:43
阅读次数：
316
