增删节点 数据迁移 一、所有事情开始之前,先要备份好cloudera manager的数据库,以及hadoop集群中的一些组件带的数据库。这里保存了很多元数据,像hive这种丢了很麻烦的。 二、如果需要换nameNode的存储目录 1、备份nameNode原始数据 cp -r /ddhome/dfs ...
分类:
其他好文 时间:
2018-05-13 19:06:53
阅读次数:
351
Hadoop家族 整个Hadoop家族由以下几个子项目组成: Hadoop Common: Hadoop体系最底层的一个模块,为Hadoop各子项目提供各 种工具,如:配置文件和日志操作等。 HDFS: 是Hadoop应用程序中主要的分布式储存系统, HDFS集群包含了一个NameNode(主节点) ...
分类:
其他好文 时间:
2018-04-17 18:06:18
阅读次数:
207
前期准备工作不多说了 先给每个节点配置镜像源,我这里以节点2为例 卸载centos6.5自带的jdk后就安装jdk,也是3个节点都安装 在节点1安装server sudo yum install cloudera-manager-daemons cloudera-manager-server 在每个 ...
分类:
其他好文 时间:
2018-04-13 22:36:19
阅读次数:
2089
Configuring Network Names This page is for manual CDH installations only. Cloudera Manager users should disregard.Important: CDH requires IPv4. IPv6 i ...
分类:
Web程序 时间:
2018-03-30 23:13:30
阅读次数:
243
为Cloudera Manager建立数据库:/usr/share/cmf/schema/scm_prepare_database.sh mysql -h[mysql数据库的主机名] -P63751 -ugdp_root -p[password] --scm-host [cm server的主机名] ...
分类:
其他好文 时间:
2018-03-27 12:26:02
阅读次数:
296
安装目录/usr/local/apps/phoenix/bin/ 下面是三种phoenix的安装方式 1、在线安装(不可行,要求的cdh版本不符合) 配置phoenix的下载地址https://mirrors.tuna.tsinghua.edu.cn/apache/phoenix/apache-ph ...
分类:
其他好文 时间:
2018-02-05 12:41:43
阅读次数:
1657
一、Cloudera manager的服务安装 包含2个: 1、 是软件包的分发、安装 此种方式安装的时候。Cloudera manager会在激活这个步骤验证软件的版本和当前cdh的兼容性。如果不符合会提示,并且不能激活。 (1)、包的在线安装 上一步中配置会打开这个界面进行:下载地址的配置。 点 ...
分类:
其他好文 时间:
2018-02-05 12:38:58
阅读次数:
252
1. 硬件准备 使用了五台机器,其中两台8c16g,三台4c8g。一台4c8g用于搭建cmServer和NFS服务端,另外4台作为cloudera manager agent部署CDH集群。 |ip|主要服务/角色|hostname( hosts配置与 ...
分类:
其他好文 时间:
2017-12-14 04:13:16
阅读次数:
231
在启动Yarn时, NodeManager 启动失败。接下来查看对应的日志:Cloudera Manager 主页,点击YARN项操作,选择“实例”,点击角色类型,进入NodeManager 主页,在日志文件下拉框有stdout,stderr,角色日志文件,建议查看角色日志文件。 下面是角色日志文件 ...
分类:
其他好文 时间:
2017-11-26 11:22:17
阅读次数:
362
CDH:Cloudera‘s Distribution,including Apache Hadoop. Hadoop众多分支中的一种,可直接用于成产环境 CM:Cloudera Manager ...
分类:
其他好文 时间:
2017-11-25 19:59:32
阅读次数:
138