Ambari 是 Apache Software Foundation 的一个顶级开源项目，是一个集中部署、管理、监控 Hadoop 分布式集群的工具。但是这里的 Hadoop 是一个广义概念，并不仅仅指的是 Hadoop（HDFS、MapReduce），而是指 Hadoop 生态圈（包括 Spar ...
分类：
其他好文 时间：
2017-04-13 19:19:39
阅读次数：
446
一、平台环境 二、环境准备1、 增加系统打开文件数和进程数 在每台服务器命令行执行： ulimit -n 显示当前可以打开的最大文件数 sudo vim /etc/security/limits.conf 在文件中添加 * - nofile 655350 * - nproc 655350 然后保存 ...
分类：
其他好文 时间：
2017-04-10 18:37:09
阅读次数：
513
ambari搭建hadoop大数据平台系列3-搭建本地仓库1.官方参考https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/setting_up_a_local_repository_with_no_internet_access.html2.本地实例10.1.11.32localRepository-11-32下载路径：记得下..
分类：
其他好文 时间：
2017-04-05 00:01:36
阅读次数：
255
ambari搭建hadoop大数据平台系列4-配置ambari-server,分为三部分：官网:https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/download_the_ambari_repo_lnx7.html安装ambari-server配置ambari-server命令;ambari-serversetup启动ambari-..
分类：
其他好文 时间：
2017-04-05 00:00:50
阅读次数：
227
ambari搭建hadoop大数据平台系列6-验证测试web检查组件服务是否正常启动shell端检查服务是否健康hdfsfsck/-files-blocks-locationsjavaapi/python检查服务是否正常
分类：
其他好文 时间：
2017-04-05 00:00:04
阅读次数：
281
最近要为第三方搭建一套大数据平台，中间先进行了虚拟机版本，测试通过后，进行了物理机版本的生产环境，网上关于ambari的文章并不多，但好在ambari官方文档质量略高，社区比较活跃，便整理该系列的文档，将埋掉的坑抛出来，帮助小伙伴们更加快速的搭建自己的hadoop平台。分三..
分类：
其他好文 时间：
2017-04-04 17:54:14
阅读次数：
219
本案例搭建的环境介绍如下：Ambari2.4.2+HDP2.5（hadoop2.7；hive1.2；Tez；Spark2.0）+jdk1.8.25+centos7.0,这里首先要关注些注意事项，至于为什么会一一说明。第一部分：注意事项：版本必须低于7.2selinux必须关闭firewalld必须关闭127.0.0.1hosts该条记录删除本地仓库必须搭..
分类：
其他好文 时间：
2017-04-04 17:53:04
阅读次数：
222
准备工作1.安装JDK，集群内各成员主机安装JDK的路径和版本必须统一。2.在集群内主机安装一台MySQLServer（MySQL为选装，Ambari默认的数据库为PostgreSQL）1.MySQL配置创建ambari-server的数据库以及连接用户，且授权
#mysql-uroot-p
CREATEDATABASEambariDEFAULTCHARSET=utf8;
..
分类：
其他好文 时间：
2017-03-27 19:54:59
阅读次数：
405
Ambari是在Hadoop大数据生态圈的基础上应运而生，Ambari的架构也借助了分布式的思想，细细品味，与Hadoop分布式架构有很多相似之处。 Hadoop中单NN 与多DN的通信是借助netty封装的RPC机制实现，单Ambari server与多Agent通信则是基于restful api ...
分类：
其他好文 时间：
2017-03-24 22:44:41
阅读次数：
281
一、配置主机和节点机器之间SSH无密登录多台外网服务器配置时，需要在/etc/hosts中把本机的IP地址设置为内网IP地址http://2d67df38.wiz02.com/share/s/0JpZYU2X7kl626aE730Q_Flq3daBjm08rAnl2oLpli2uMOfo二、为每台主... ...
分类：
其他好文 时间：
2017-03-17 17:28:16
阅读次数：
1256
