前言: 其他集群管理工具安装oozie和手动编译安装oozie,关于oozie的UI界面无法访问的问题,大致和该方法类似. 找到下面4步骤里的视图显示的目录,有一个ext 2.2软链指向的路径 将之前的下载的安装包放到该路径就可以了 其他步骤基本一致,路径稍有出入,方法如下: 1.安装完成,访问UI ...
分类:
其他好文 时间:
2020-01-16 20:35:42
阅读次数:
178
系统: win10 + Hyper-V 虚拟机设置 https://mswiki.morningstar.com/display/~kke/Setup+Hyper-V 虚拟机系统: ubuntu 18.04 server 安装gnome桌面 https://www.linuxidc.com/Linu ...
分类:
Web程序 时间:
2020-01-15 11:52:24
阅读次数:
95
docker exec -it ambari-server bash docker cp /etc/apt/sources.list ambari-server:/etc/apt/ docker export -o ambari-server.tar e932da0e4b3e docker impo ...
分类:
其他好文 时间:
2019-12-27 13:17:49
阅读次数:
69
现象:hdp的集群没有配置spak的临时本地目录,默认在跑程序的时候会将中间过程的文件存放在本地的/tmp目录下 如果跑的spark数据量过大,就会导致/tmp下文件过大,最终导致根分区被占满,系统崩溃 解决办吧:修改spark的环境变量配置文件,在ambari界面上找到spark-env.sh的配 ...
分类:
其他好文 时间:
2019-12-20 12:12:42
阅读次数:
211
以两台节点为例来组件Hadoop分布式集群,这里采用的系统版本为Centos7,如下表所示: 主机名 内存 硬盘 IP地址 角色 master 8192MB 100G 192.168.200.131 Ambari-Server Ambari-Agent slave1 4096MB 100G 192. ...
分类:
其他好文 时间:
2019-12-20 01:16:58
阅读次数:
160
查看/usr/log/hue/error.log发现如下问题[24/Nov/201916:57:53]supervisorERRORProcess/usr/lib/hue/build/env/bin/huekt_renewerexitedabnormally.Restartingit.[24/Nov/201916:57:53]supervisorERRORProcess/usr/lib/hue/b
分类:
其他好文 时间:
2019-11-25 19:00:57
阅读次数:
206
参见 HDP2.4安装(五):集群及组件安装 ,安装配置的spark版本为1.6, 在已安装HBase、hadoop集群的基础上通过 ambari 自动安装Spark集群,基于hadoop yarn 的运行模式。 目录: Spark集群安装 参数配置 测试验证 Spark集群安装: 在ambari ...
分类:
其他好文 时间:
2019-10-02 01:00:23
阅读次数:
123
Ambari简介 Ambari概述 Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的创建、管理和监控。Ambari已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等; ...
分类:
其他好文 时间:
2019-08-20 10:40:13
阅读次数:
119
一、问题描述 日志文件信息如下: 二、解决办法一 i. 删除 yarn-nm-state 目录的所有文件再次启动 ii. 再次启动 NodeManager 组件 我这里使用的是 Ambari 来管理的,直接就Web界面操作,也可以使用命令操作启动。 iii. 查看是否启动成功,已启动成功 三、解决办 ...
分类:
其他好文 时间:
2019-08-08 13:32:07
阅读次数:
86
echo‘{"topics":[{"topic":"test1"},{"topic":"test2"}],"version":1}‘>ready-move-topics.json/usr/hdp/current/kafka-broker/bin/kafka-reassign-partitions.sh--zookeeperagent01.ambari.com:2181,agent02.amb
分类:
其他好文 时间:
2019-08-02 16:41:04
阅读次数:
79