1131 cd /apps/hadoop/hdfs/namenode/ 1132 rm -rf current in_use.lock 1133 cd /apps/hadoop/hdfs/data/ 1134 rm -rf current in_use.lock 1135 cd /hadoop/hd ...
分类:
其他好文 时间:
2020-02-08 11:25:21
阅读次数:
80
一 监控架构 1.1 组成 客户端:数据采集部分 服务端:数据存储分析告警展示 1.2 采集模式 被动模式:服务器端到客户端采集数据,对服务器的开销较大,适合小规模的监控环境。 主动模式:客户端主动上报数据到服务器端,对服务器的开销较小,适合大规模的监控环境。 1.4 协议 专用客户端采集 公用协议 ...
分类:
其他好文 时间:
2020-02-03 11:40:36
阅读次数:
93
刚开始debug ambari server的时候,很多逻辑都是第一次接触。其中有很多知识点还是记录一下的好,做个备忘。这些知识点对于自定义api的开发还是很有作用的。 1. api的子href的最后一个字符串如何定义?例如,指定一个id? 解答: ambari 2.6 编辑key_properti ...
分类:
其他好文 时间:
2020-01-26 15:54:32
阅读次数:
80
前言: 其他集群管理工具安装oozie和手动编译安装oozie,关于oozie的UI界面无法访问的问题,大致和该方法类似. 找到下面4步骤里的视图显示的目录,有一个ext 2.2软链指向的路径 将之前的下载的安装包放到该路径就可以了 其他步骤基本一致,路径稍有出入,方法如下: 1.安装完成,访问UI ...
分类:
其他好文 时间:
2020-01-16 20:35:42
阅读次数:
178
系统: win10 + Hyper-V 虚拟机设置 https://mswiki.morningstar.com/display/~kke/Setup+Hyper-V 虚拟机系统: ubuntu 18.04 server 安装gnome桌面 https://www.linuxidc.com/Linu ...
分类:
Web程序 时间:
2020-01-15 11:52:24
阅读次数:
95
1. 安装依赖包和软件 1. 安装依赖包和软件 在所有服务器上输入命令进行安装操作 2. 在master服务器上配置监控端 vi /etc/ganglia/gmetad.conf 修改下面内容 data_source "server" 50 master:8649 master-backup:864 ...
分类:
其他好文 时间:
2019-12-28 22:44:03
阅读次数:
107
docker exec -it ambari-server bash docker cp /etc/apt/sources.list ambari-server:/etc/apt/ docker export -o ambari-server.tar e932da0e4b3e docker impo ...
分类:
其他好文 时间:
2019-12-27 13:17:49
阅读次数:
69
现象:hdp的集群没有配置spak的临时本地目录,默认在跑程序的时候会将中间过程的文件存放在本地的/tmp目录下 如果跑的spark数据量过大,就会导致/tmp下文件过大,最终导致根分区被占满,系统崩溃 解决办吧:修改spark的环境变量配置文件,在ambari界面上找到spark-env.sh的配 ...
分类:
其他好文 时间:
2019-12-20 12:12:42
阅读次数:
211
以两台节点为例来组件Hadoop分布式集群,这里采用的系统版本为Centos7,如下表所示: 主机名 内存 硬盘 IP地址 角色 master 8192MB 100G 192.168.200.131 Ambari-Server Ambari-Agent slave1 4096MB 100G 192. ...
分类:
其他好文 时间:
2019-12-20 01:16:58
阅读次数:
160
查看/usr/log/hue/error.log发现如下问题[24/Nov/201916:57:53]supervisorERRORProcess/usr/lib/hue/build/env/bin/huekt_renewerexitedabnormally.Restartingit.[24/Nov/201916:57:53]supervisorERRORProcess/usr/lib/hue/b
分类:
其他好文 时间:
2019-11-25 19:00:57
阅读次数:
206