CDH安装的ZK，三个节点，基本都是默认配置，一直用得正常，今天出现问题，客户端连接超时6倍时长，默认最大会话超时时间是一分钟。原因分析：1.首先要确认网络正确。确认时钟同步。2.查看现有的配置，基本都是默认配置 JVM配置是1G 有 2g的，不一样3.查看dataDir目录，du -sh .发现已 ...
分类：
其他好文 时间：
2018-12-31 22:00:50
阅读次数：
337
一、概念介绍1、CDH概览CDH是ApacheHadoop和相关项目的最完整、最受测试和最流行的发行版。CDH提供Hadoop的核心元素-可伸缩存储和分布式计算-以及基于web的用户界面和重要的企业功能。CDH是Apache许可的开放源码，是唯一提供统一批处理、交互式SQL和交互式搜索以及基于角色的访问控制的Hadoop解决方案。CDH提供以下特性：灵活性：存储任何类型的数据并使用各种不同的计算框
分类：
其他好文 时间：
2018-11-24 14:40:53
阅读次数：
250
1、准备工作 1.1 环境 centos7、jdk8、mysql5.7、python2.7 1.2文件下载 1.2.1 cloudmanger地址 https://archive.cloudera.com/cm6/6.0.0/redhat7/yum/RPMS/x86_64/ cloudera man ...
分类：
其他好文 时间：
2018-11-14 12:24:19
阅读次数：
797
1.安装jdk 我这里已经安装过了，这里就不演示了 2.安装flume 安装cdh版本的，http://archive.cloudera.com/cdh5/cdh/5/ 安装完毕之后，配置环境变量。 我们看看文件的结构 bin目录是一些启动文件，conf是配置文件，其他的不用关注，我们进入conf目 ...
分类：
Web程序 时间：
2018-11-08 01:09:47
阅读次数：
239
摘要：前言其实cloudera已经做了这个事了,只是把kafka的包和cdh的parcel包分离了,只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了,就可以实现完美集成了。具体实现的简要步骤可参照cloudera官网提供的文档:http://www.cloudera.com/ ...
分类：
其他好文 时间：
2018-10-24 12:00:57
阅读次数：
221
###通过http://192.168.50.200:7180/cmf/login 访问CM控制台 4.CDH安装 4.1CDH集群安装向导 1.admin/admin登陆到CM 2.同意license协议，点击继续 3.选择60试用，点击继续 4.点击“继续” 5.输入主机IP或者名称，点击搜索找 ...
分类：
其他好文 时间：
2018-10-13 18:09:34
阅读次数：
293
CDH是Cloudera公司提供的Hadoop发行版，它在原生开源的Apache Hadoop基础之上，针对特定版本的Hadoop以及Hadoop相关的软件，如Zookeeper、HBase、Flume、Sqoop等做了兼容性开发，我们在安装CDH发行版的Hadoop时就无需进行额外繁琐的兼容性测试 ...
分类：
其他好文 时间：
2018-10-13 12:56:36
阅读次数：
319
我们在部署完CDH 5.7.0和CM 5.7.0后，开始启动CM Agent，但是会出现下面的错误：# cloudera-scm-agent startStarting cloudera-scm-agent: [FAILED] 问题查找# cat /opt/cloudera-manager/cm-5 ...
分类：
其他好文 时间：
2018-10-12 14:12:48
阅读次数：
225
最近通过CM的形式安装大数据组件，然后出现了各种问题。 看到上面的截图，第一感觉是不是哪里没有设置好，或者是什么情况，然后查看打印出来的日志。日志的截图如下： 这个感觉就是日志目录创建不了，肯定是哪里权限不足导致的，但是当创建好之后，赋予权限的时候还是不可以，然后重新装了好多次，还是一直报这个错。最 ...
分类：
其他好文 时间：
2018-09-04 13:48:24
阅读次数：
304
最近在做CM和CDH的安装遇到了在安装的过程当中出现了主机运行状态不良的情况，截图如下： 出现这个首先想到的是这台机器的启动的过程当中考虑除了问题（因为我装了好多次，考虑集群环境被污染了） 然后在网上找到说删除一个文件即可，删除的问题文件如下： ...
分类：
其他好文 时间：
2018-09-04 13:47:45
阅读次数：
1197
