系统环境4台联想R510服务器,其中master节点4核心、8GB,其它节点双核心、4GB。网卡:100M。共有硬盘6TB。网络环境内网。Centos6.5 x64(安装系统时尽量把开发包安装齐全,另master节点需要Mysql可以在安装系统时勾选)。准备工作卸载系统自带OPEN-JDK(所有节点...
分类:
其他好文 时间:
2015-08-02 16:30:06
阅读次数:
219
原创文章,转载请注明: 转载自http://www.cnblogs.com/tovin/p/4689422.html本文介绍centos 6中CM5.4的安装步骤一、搭建yum仓库 1、搭建web服务器,具体步骤省略 2、下载CM、CDH的parcels包 下载cm rpm包:wget -...
分类:
其他好文 时间:
2015-07-30 16:45:02
阅读次数:
157
概述上一篇文章分析了cloudera manager中监控数据、中心数据的存储方式,如何配置外部表等。这一篇文章进一步分析监控数据的存储,配置,调优等。Service Monitor和Host Monitor角色在cloudera manager中存储了时间序列、健康数据、Impla查询和Yarn应...
分类:
其他好文 时间:
2015-07-30 16:39:19
阅读次数:
124
安装cloudera Manager的时候,必须要求集群的主机之间时间同步,搭建一个NTP服务器的思路是,首先通过一台主机master与外网进行时间同步,然后其他的slaver主机与主机master进行时间同步。1、所有节点配置NTP服务集群中所有主机必须保持时间同步,如果时间相差较大会引起各种问题...
分类:
其他好文 时间:
2015-07-02 09:57:06
阅读次数:
125
今天早上来公司发现cloudera manager出现了hdfs的警告,如下图:解决的思路是:1、首先解决简单的问题,查看警告提示的设置的阀值时多少,这样就可以快速定位到问题在哪了,果然JournalNode Sync Status提示最先消去;2、然后解决Sync Status问题,首先找到提示语...
分类:
其他好文 时间:
2015-07-01 14:09:16
阅读次数:
1544
Cloudera Manager Server和Agent都启动以后,就可以进行CDH5的安装配置了。
这时可以通过浏览器访问主节点的7180端口测试一下了(由于CM Server的启动需要花点时间,这里可能要等待一会才能访问),默认的用户名和密码均为admin。制作本地源先下载CDH到本地http://archive-primary.cloudera.com/cdh5/parcels/5.3.4...
分类:
其他好文 时间:
2015-06-28 00:07:08
阅读次数:
732
这几天一直在安装CDH,头都搞大了,安装第三次,终于成功了。
第一次问题很多,后面卸载了,由于没有卸载干净导致第二次安装失败。后来索性重装系统了,直接使用了纯净系统进行安装。一个人跑到学院机房去装系统,苦逼惨了。
,不扯了,记录下安装流程。系统环境
操作系统:CentOS 6.5 x64,配置如下:
Cloudera Manager:5.3.4
CDH: 5.3.4前期准备工作(系统环...
分类:
其他好文 时间:
2015-06-27 22:51:49
阅读次数:
282
安装
http://blog.sina.com.cn/s/blog_75262f0b0101aeuo.html
在这之前我们先把cm包里面的所有文件安装在说
这是由于CM依赖postgresql,需要在本机上安装postgresql,如果是在线安装,自动以Yum方式安装,由于是离线,无法自动安装postgresql。
检查是否安装了postgresql:
[r...
分类:
其他好文 时间:
2015-06-27 16:42:47
阅读次数:
142
错误报错1、时间不能同步2014.12.18
做同步时间的时候,执行命令操作:
[root@zhanglin ~]# /usr/sbin/ntpdate pool.ntp.org
会报错:
Name server cannot be used, exiting18 Dec 19:39:39 ntpdate[3592]: name server cannot be used, rea...
分类:
其他好文 时间:
2015-06-27 16:39:43
阅读次数:
1064
8、配置ssh免密码登陆
且过,后面再补
进入.ssh里面
这将生成一个隐藏文件 .ssh,进入这个文件夹,然后将公钥追加到authorized_keys文件中,此文件最初并不存在,但执行追加命令后将自动生成:
cd .ssh
cat id_rsa.pub >> authorized_keys
...
分类:
其他好文 时间:
2015-06-26 18:13:46
阅读次数:
238