码迷,mamicode.com
首页 > 其他好文 > 详细

CM+CDH大数据平台

时间:2018-04-13 22:37:47      阅读:1581      评论:0      收藏:0      [点我收藏+]

标签:下载地址   .repo   分发   httpd   strong   状态   服务启动   http   数据   

我这里搭建的是3节点,centos6.5的静态ip ,ssh免密码登录,防火墙关闭,时钟同步等等一些准备工作我这里就不多说了

我们可以进官网看看 

https://www.cloudera.com/

 

我们进来看看

https://www.cloudera.com/documentation.html

技术分享图片

 

技术分享图片

 

 

技术分享图片

 

 

我们先部署我们的本地yum源

技术分享图片

技术分享图片

 

安装完之后, 我们可以发现多了这么一个目录

技术分享图片

技术分享图片

 

 下面我们把httpd服务启动一下

 技术分享图片

 

 

 直接用我们的ip地址登录

技术分享图片

 

 

我们在http://archive.cloudera.com/cm5/repo-as-tarball/5.8.0/下载cm的tar包

我们下载这个

技术分享图片

 

 

 下载好了

技术分享图片

 

我们上传到cm1这个节点上

技术分享图片

 

 

 上传完了之后我们在html目录下创建目录

技术分享图片

 

 把这个包移动到这个路径下

技术分享图片

 

 我们进去解压一下这个tar包

 技术分享图片

 

 我们直接在浏览器输入http://192.168.86.141/cm-5.8.0/

技术分享图片

 

把压缩包干掉

 技术分享图片

技术分享图片

 

 我们使用下面的命令先来安装创建本地源的工具

 

技术分享图片

yum install yum-utils createrepo

 

技术分享图片

 

 技术分享图片

 

 

技术分享图片

createrepo  /var/www/html/cm-5.8.0

 

在浏览器里可以看到多了这个目录,本地yum仓库的目录

技术分享图片

 

 

接下来我们修改本地源的地址

 技术分享图片

技术分享图片

 

 技术分享图片

[myrepo]
  name=myrepo
 baseurl=http://192.168.86.141/cm-5.8.0
 enabled = 1
 gpgcheck = 0

 

 保存退出后我们把这个源文件分发给另外两个节点

技术分享图片

[root@cm1 yum.repos.d]#  scp myrepo.repo root@cm2:/etc/yum.repos.d
myrepo.repo                                                                                 100%   93     0.1KB/s   00:00    
[root@cm1 yum.repos.d]#  scp myrepo.repo root@cm3:/etc/yum.repos.d
myrepo.repo                                                                                 100%   93     0.1KB/s   00:00    
[root@cm1 yum.repos.d]# 

 

 

我们到其他节点查看一下

技术分享图片

 

 

技术分享图片

 

 

 我们先创建一个目录

技术分享图片

 

 

下载http://archive.cloudera.com/cm5/installer/5.8.0/

技术分享图片

 

 

上传

技术分享图片

技术分享图片

 

赋予权限

技术分享图片

 

 我们执行一下这个文件

 ./cloudera-manager-installer.bin --skip_repo_package=1

 技术分享图片

技术分享图片

 

遇到这情况就检查防火墙是否关闭,vim /etc/sysconfig/selinux 

技术分享图片

 

 

如果CM安装失败,直接删除文件目录

rm -Rf /usr/share/cmf /var/lib/cloudera* /var/cache/yum/cloudera*

 

 

 技术分享图片

 这种情况的话就要检查系统的jdk了,先把centos6.5的自带jdk卸载,安装1.7版本的jdk

 

当你看的这个界面的时候,就会弹出一个浏览器窗口

技术分享图片

 

当然这个界面不会马上出来,因为服务启动需要点时间

我们可以查看一下服务启动状态

技术分享图片

 

 技术分享图片

 

分别输入admin admin作用户名和密码,其实也可以不用默认弹出的浏览器,打开电脑安装的浏览器,输入地址http://192.168.86.141:7180/

 

 登录进去之后

技术分享图片

 

 

 接下来我们需要检查我们系统是时间同步情况,因为这个对时钟同步的要求非常高

技术分享图片

 

技术分享图片

 

 技术分享图片

 

下载CDH的parcels包并配置到Cloudera Manager主服务器上

检查完之后我们下载  Parcels包

 Parcels包下载地址: http://archive.cloudera.com/cdh5/parcels/ 

技术分享图片

 

 把这个两个文件下载

 技术分享图片

 

下载后我们把这两个文件上传到cm1节点上

技术分享图片

 

 技术分享图片

 

技术分享图片

 

 接下来我们需要重启一下cm server这个服务

技术分享图片

 

重启完之后我们需要再次打开http://192.168.86.141:7180/这个地址,这里需要一点时间去等等,启动需要时间的

技术分享图片

 

 技术分享图片

 

 技术分享图片

 

 技术分享图片

 

 输入主机名,我这里是3个节点都安装

技术分享图片

 

技术分享图片

 

 

 

 

 

技术分享图片

 

技术分享图片

 

 技术分享图片

 

因为我之前安装了jdk,这里我们就不选择安装了,如果之前没有安装的话可以选安装

技术分享图片

 

 技术分享图片

 

 这里输入的是root用户的密码

技术分享图片

 

技术分享图片

 

接下来等待安装

技术分享图片

 

 

 等待自己下载安装技术分享图片

 

 经过漫长的等待

技术分享图片

 

 

技术分享图片

 

CM+CDH大数据平台

标签:下载地址   .repo   分发   httpd   strong   状态   服务启动   http   数据   

原文地址:https://www.cnblogs.com/braveym/p/8783373.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!