cdh5 hadoop redhat 本地仓库配置cdh5 在网站上的站点位置：http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/在RHEL6上配置指向这个repo非常简单，只要把：http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh...
分类：
其他好文 时间：
2014-12-19 15:53:27
阅读次数：
159
CDH简介：在Hadoop生态系统中，规模最大、知名度最高的公司则是Cloudera。现在国内很多公司也都选用他们的发行版本（CDH）。CDH：一个对ApacheHadoop的集成环境的封装，可以使用ClouderaManager进行自动化安装。CDH有企业版和免费版，下面介绍一下免费版可以使用的功能：1、可..
分类：
其他好文 时间：
2014-12-19 12:21:01
阅读次数：
580
cdh hadoop 安装包自动下载脚本下面的shell脚本用于自动下载cdh5.2.1的hadoop rpm包. 测试通过。#!/bin/bash
#
# @file
# cdh5_rhel6_x64_cdh5.2.1-downloads.sh
#
# @date
# 2014-12-18
#
# @author
# cheungmine
#
# @version
# 0.0.1...
分类：
其他好文 时间：
2014-12-18 16:58:02
阅读次数：
639
如何做集成，其实特别简单，网上其实就是教程。http://blog.csdn.net/fighting_one_piece/article/details/40667035 看这里就成。 我用的是第一种集成。。做的时候，出现了各种问题。 大概从从2014.12.17 早晨5点搞到2014.12.1....
分类：
Web程序 时间：
2014-12-17 20:39:08
阅读次数：
241
环境准备
1）JDK
2）本地cdh yum源 省.....
3）本地hosts
10.20.120.11 sp-kvm01.hz.idc.com
10.20.120.12 sp-kvm02.hz.idc.com
10.20.120.13 sp-kvm03.hz.idc.com
10.20.120.14 sp-kvm04.hz.idc.com...
分类：
其他好文 时间：
2014-12-12 11:44:59
阅读次数：
306
1 Hbase日常运维1.1 监控Hbase运行状况1.1.1 操作系统1.1.1.1 IO 群集网络IO，磁盘IO，HDFS IOIO越大说明文件读写操作越多。当IO突然增加时，有可能：1.compact队列较大，集群正在进行大量压缩操作。2.正在执行mapreduce作业可以通过CDH前台查看整...
分类：
其他好文 时间：
2014-12-09 13:48:38
阅读次数：
11902
UpgradeClouderaManagerto5.2.11.StoptheClouderaManagementService2.StoptheHiveserviceandallservicessuchasImpalaandHuethatusetheHivemetastore.3.
BackupMySQLDatabases(mysqldump-uroot-p--single-transaction
--flush-logs--master-data=2--delete-master-logs--all-dat..
分类：
其他好文 时间：
2014-12-02 17:29:39
阅读次数：
227
ConfiguringHBasetoUseHDFSHAnothingtodoUpgradingtheHiveMetastoretoUseHDFSHAConfiguringHuetoWorkwithHDFSHAaddHttpFSroleinstanceunderHDFSRestarttheHueserviceConfiguringImpalatoWorkwithHDFSHAimpala-shell-iimpala-daemon-host[impala-daemon-host:21000]>INVALIDA..
分类：
其他好文 时间：
2014-11-26 11:39:39
阅读次数：
161
上一篇文章分析了cloudera manager中监控数据、中心数据的存储方式，怎样配置外部表等。这一篇文章进一步分析监控数据的存储，配置，调优等。...
分类：
其他好文 时间：
2014-11-19 16:07:07
阅读次数：
288
Hadoop下，HDFS运维算是一个非常重要的过程。对于生产而言，海量数据被存储到了HDFS中，如果HDFS挂了，那么导致生产环境无法工作是小，遗失数据而造成的后果将更加巨大。下面总结下CDH体系下HDFS基础运维知识。首先得从HDFS下的NameNode开始，简介下NameNode的工作机制当我们把..
分类：
其他好文 时间：
2014-11-18 01:49:51
阅读次数：
284
