Yun2集群上Ambari+HDP安装1. 安装环境说明：系统版本：CentOS7安装版本：Ambari版本:2.2.2.0HDP版本:2.4.2.0集群机器：AmbariServer:yun2AmbariAgent:yun3,yun4,yun6,yun18,yun19,yun20,yun212. 操作系统环境准备2.1配置SSH免密码登录主节点里root用户登录执行如下步骤：ssh-ke..
分类：
其他好文 时间：
2017-05-18 20:01:24
阅读次数：
409
作为相对于cloudera的CDH的另一个选择是hortonworks的HDP和HDF，HDF是针对物联网的套件，HDP是与CDH对应的大数据平台产品。 hortonworks的HDP和HDF将storm和kafka集成进大数据平台，可以进行统一监控管理。 网络上有两套参考实现，都提供了模拟的数据流 ...
分类：
其他好文 时间：
2017-04-17 14:32:59
阅读次数：
1569
原因是clusterID不一致 删除tmp下的内容 从/home/hdp/hadoop/name/current/VERSION 获得clusterID 修改到 /home/hdp/hadoop/data/current/VERSION 修改保持一致，然后重启服务 ...
分类：
Web程序 时间：
2017-04-15 23:03:45
阅读次数：
808
一、平台环境 二、环境准备1、 增加系统打开文件数和进程数 在每台服务器命令行执行： ulimit -n 显示当前可以打开的最大文件数 sudo vim /etc/security/limits.conf 在文件中添加 * - nofile 655350 * - nproc 655350 然后保存 ...
分类：
其他好文 时间：
2017-04-10 18:37:09
阅读次数：
513
准备工作1.安装JDK，集群内各成员主机安装JDK的路径和版本必须统一。2.在集群内主机安装一台MySQLServer（MySQL为选装，Ambari默认的数据库为PostgreSQL）1.MySQL配置创建ambari-server的数据库以及连接用户，且授权
#mysql-uroot-p
CREATEDATABASEambariDEFAULTCHARSET=utf8;
..
分类：
其他好文 时间：
2017-03-27 19:54:59
阅读次数：
405
一、配置主机和节点机器之间SSH无密登录多台外网服务器配置时，需要在/etc/hosts中把本机的IP地址设置为内网IP地址http://2d67df38.wiz02.com/share/s/0JpZYU2X7kl626aE730Q_Flq3daBjm08rAnl2oLpli2uMOfo二、为每台主... ...
分类：
其他好文 时间：
2017-03-17 17:28:16
阅读次数：
1256
本文简单记录了一下使用VMware workstation 10、CentOS和HDP 2.0.6(Hadoop 2.2)发行版构建Hadoop开发测试环境的全部流程。这个过程中我遇到了不少问题，也耽误了不少的时间，所以将此文奉上，希望对大家有所帮助。 本文使用两台虚拟机搭建真实集群环境，操作系统为... ...
分类：
其他好文 时间：
2016-12-12 14:37:44
阅读次数：
214
1.添加phoneix驱动 (1).点击Tools--->Driver Manager… (2).新建一个驱动，名称为phoenix（名称随意），选择phoenix的客户端驱动，驱动类如图所示 phoneix驱动可以在HDP包中获得： 2.新建Connection (1)点击Tools--->Con... ...
分类：
数据库 时间：
2016-11-28 20:45:17
阅读次数：
585
Yarn & Mapreduce 参数的具体含义和配置 http://zh.hortonworks.com/blog/how-to-plan-and-configure-yarn-in-hdp-2-0/ ...
分类：
其他好文 时间：
2016-11-21 19:44:38
阅读次数：
137
