为了监控方便,想把研发环境中的主机节点都纳入Cloudera Manager的管理中,这样在遇到问题时可方便的查看主机的硬件资源情况。 添加主机节点有多种方式,由于我是离线工作,所以选择rpm包的方式安装agent,然后添加节点(还有一种部署本地仓库的方式更简单方便,回头有时间整理一下再发出来)。在 ...
分类:
其他好文 时间:
2021-01-20 11:52:39
阅读次数:
0
问题1 错误提示:cloudera-scm-agent 已死,但 pid 文件仍存解决办法: [root@node1 ~]# cd /var/run/ [root@node1 run]# rm -rf cloudera-scm-agent.pid 1 2 问题2 错误提示: error: No so ...
分类:
其他好文 时间:
2020-12-01 11:54:53
阅读次数:
1
>.ClouderaManager功能 1.1>.管理监控集群主机(主要监控硬件和软件的信息); 1.2>.同一管理配置(主要是针对服务,比如hdfs,hbase等等); 1.3>.管理维护Hadoop平台系统; 2>.ClouderaManager的一些常见名词 2.1>.主机-host 2.2> ...
分类:
其他好文 时间:
2020-12-01 11:54:36
阅读次数:
3
1 连接阿里云服务器 打开远程连接工具进行配置,这里以CRT为例。 1)新建一个session 2)填写hostname(填写公网ip) 2 修改hosts文件 [root@hadoop001 ~]# vim /etc/hosts 127.0.0.1 localhost localhost ::1 ...
分类:
其他好文 时间:
2020-09-07 18:57:02
阅读次数:
43
Cloudera CDH集群的部署实际上主要是Cloudera Manager的部署,在说的直白点儿那就是Cloudera Manager Server和本地YUM源的部署与搭建。 Cloudera CDH和Manager 6.3.3 及以后版本升级需要有效的cloudera enterprise或 ...
分类:
其他好文 时间:
2020-05-28 21:35:22
阅读次数:
128
本文是在CentOS7.4 下进行CDH6集群的完全离线部署。CDH5集群与CDH6集群的部署区别比较大。 说明:本文内容所有操作都是在root用户下进行的。 文件下载 首先一些安装CDH6集群的必须文件要先在外网环境先下载好。 Cloudera Manager 6.3.0 CM6 RPM:http ...
分类:
其他好文 时间:
2020-02-22 13:43:56
阅读次数:
169
原文链接: 组件端口及说明 CDH 7180: Cloudera Manager WebUI端口7182: Cloudera Manager Server 与 Agent 通讯端口 Hadoop 50070:HDFS WEB UI端口8020 : 高可用的HDFS RPC端口9000 : 非高可用的 ...
分类:
其他好文 时间:
2020-01-07 19:56:27
阅读次数:
135
https://www.jianshu.com/p/012739e132f6 三个错误:1.jdk安装在/usr目录下2.启动agent时报错/lib/x86_64-linux-gnu/libcrypto.so.1.0.0: version `OPENSSL_1.0.2' not found 升级o ...
分类:
系统相关 时间:
2019-12-06 13:32:03
阅读次数:
109
首先需要启动mysql源数据库 server所在服务器的路径:/opt/cm-5.14.0/etc/cloudera-scm-server 下 查看配置文件: db.properties 查看mysql源数据库配置在哪台服务器,然后去对应服务器启动mysql元数据 service mysqld st ...
分类:
其他好文 时间:
2019-11-04 19:59:08
阅读次数:
144
<!-- flowchart 箭头图标 勿删 --> 制作Elasticsearch的Parcel包和csd文件 将Parcel包和manifest.json文件部署到httpd服务中 [root@node01 ~]# mkdir -p /var/www/html/elasticsearch [ro ...
分类:
其他好文 时间:
2019-09-02 17:08:36
阅读次数:
453