码迷,mamicode.com
首页 > 其他好文 > 详细

CDH商业版本的搭建

时间:2016-11-09 11:38:12      阅读:158      评论:0      收藏:0      [点我收藏+]

标签:dem   for   新建   表头   密码   idt   启动   replicat   miss   

一:准备工作

1.步骤

  1)hadoop

    -》下载解压
    -》修改配置文件
    -》hadoop-env
      JAVA_HOME
    -》core-site
      fs.defaultFS
      hadoop.tmp.dir
    -》hdfs-site
      dfs.replication
      permission
    -》mapred-site
      mapreduce.frame.work
      historyserver
    -》yarn-site
      mapreduce-》shuffle
      resourcemanager地址:0.0.0.0
      日志聚集
    -》yarn-env
      JAVA_HOME
    -》slaves
      datanode/nodemanager hostname
    -》格式化
      bin/hdfs namenode -formatf
    -》启动

  2)hive
    -》下载解压
    -》创建数据仓库
      /user/hive/warehouse
    -》修改配置
    -》hive-env
      HADOOP_HOME
      HIVE_CONF_DIR
    -》log4j
      -》日志目录
    -》hive-site
      -》连接mysql
        -》数据库地址
        -》连接驱动
        -》用户名
        -》密码
      -》显示当前数据库
      -》显示表头
    -》把mysql连接驱动放入lib
    -》启动

 

二:安装Hadoop

1.新建目录cdh-5.3.6,并修改权限

  技术分享

 

 2.解压

  技术分享

 

3.配置*env.sh中的JAVA_HOME

 

 4.配置core-site.xml环境

  技术分享

 

5.配置hdfs-site.xml环境

  技术分享

 

 6.配置mapred-site.xml

  技术分享

 

7.配置slaves

  技术分享

 

8.配置yarn-site.xml

  技术分享

 

9.格式化

  技术分享

 

10.启动

  技术分享

 

三:hive

1.解压

  技术分享

 

CDH商业版本的搭建

标签:dem   for   新建   表头   密码   idt   启动   replicat   miss   

原文地址:http://www.cnblogs.com/juncaoit/p/6045890.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!