安装HDFS时,需要安装ZooKeeper,安装完了3个节点,始终有问题。 刚开始,运行良好 过了一段时间后, 问题出现了! ================================================= 定位问题 看来至少时钟偏差有问题。 检查机...
分类:
其他好文 时间:
2015-10-27 08:49:15
阅读次数:
511
1> 删除Agent节点的UUID # rm -rf /opt/cm-5.4.7/lib/cloudera-scm-agent/*2> 清空主节点CM数据库 进入主节点的Mysql数据库,然后drop database cm;3> 删除Agent节点namenode和datanode节点信息 ...
分类:
其他好文 时间:
2015-09-29 16:30:41
阅读次数:
761
前言:CDH是由Cloudera公司发行的Hadoop版本,全称(Cloudera‘s Distribution Including Apache Hadoop)。该版本基于原生Apache Hadoop版本进行改进,添加了补丁和自行开发的组件,更加稳定易用。并且Cloudera公...
分类:
其他好文 时间:
2015-05-15 18:09:09
阅读次数:
204
前言:CDH是由Cloudera公司发行的Hadoop版本,全称(Cloudera's Distribution Including Apache Hadoop)。该版本基于原生Apache Hadoop版本进行改进,添加了补丁和自行开发的组件,更加稳定易用。并且Cloudera公司已将CDH开源,可以不依靠CM也可以进行独立安装,目前来看在国内市场占有比重较大。本文采用CM方式进行安装,安装环境...
分类:
其他好文 时间:
2015-05-15 13:45:24
阅读次数:
231
由于逐渐面临高频数据的问题,所以计划正式启用hadoop分布式计算,去年10月份研究过一段时间hadoop的部署情况,确定使用CDH版本的hadoop(最新5.4.0),主要是考虑维度是减少运维难度以及快速部署上线(当然如果想更好的学习hadoop,还是建议从hadoop原生态版本部署入手)。好脑子...
分类:
其他好文 时间:
2015-05-14 17:57:49
阅读次数:
287
前边已经介绍了一种hadoop的安装工具,但是HDP动态添加节点会有一些问题,而且现在用的人好像不是很多,如果想用官方更多的,可以选择HDP,如果想使用更方便一些,可以选择CDH。安装HDP可以参考:使用HDP快速搭建Hadoop开发环境http://www.debugo.com/hdp-dev-s...
分类:
其他好文 时间:
2015-04-24 15:35:56
阅读次数:
311
子曰:君子食无求饱,居无求安,敏于事而慎于言,就有道而正焉,可谓好学也已。 译文:君子吃不求太饱,住不求太舒适,做事勤快,说话谨慎,向道德高的人学习,并能改正自己的缺点,这样就可以称得上好学了。 最近要把CDH的版本换成了5.3.0,hive的版本从0.12换成了0.13,升级完成后...
分类:
其他好文 时间:
2015-01-08 14:38:34
阅读次数:
427