基于Zookeeper的分步式队列系统集成案例 Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hca ...
分类：
其他好文 时间：
2016-09-21 10:13:51
阅读次数：
253
给hadoop用户sudo权限 建立SSH互信，参考Hadoop HA的搭建中的互信建立 建立相应的下载脚本down.sh 创建ambari目录 安装httpd 把文件解压到ambari目录下 ...
分类：
其他好文 时间：
2016-09-14 21:54:14
阅读次数：
122
编译spark1.6.1源码 正常的情况下从spark官方网站下载的发行包已经可以满足正常使用（默认支持了hive），但如果要编译相应cdh版本的hadoop或者把ganglia打包进来等，那就要重新指定编译参数来重新编译源码了。建议最好在linux环境下进行编译。 1.源码下载 官网下载地址：ht ...
分类：
其他好文 时间：
2016-09-14 00:07:44
阅读次数：
227
Ganglia监控spark1.6.1 Spark的Metrics系统允许用户把Spark metrics信息报告到Ganglia，gmond服务收集metrics信息，最后统一汇总到gmetad并通过web界面呈现。主要着重于如何配置ganglia以及spark的metrics，至于如何编译spa ...
分类：
其他好文 时间：
2016-09-13 22:15:16
阅读次数：
319
1， ganglia的安装： http://blog.topspeedsnail.com/archives/3049 2， ganglia-api项目地址 https://github.com/guardian/ganglia-api 3，ganglia-api获取数据的dataurl http:/ ...
如题：通常软件初始化密码都是admin； 但是hortonworks就突然傻逼了，居然不这样搞。（可能知道一些开发者不看官网文档，就特意弄成这样。正如我） 我上网搜了5分钟。感觉网上应该没有这样的资料。 所以就上官网看一下VM那栏介绍：http://zh.hortonworks.com/wp-con ...
分类：
其他好文 时间：
2016-09-10 11:40:43
阅读次数：
344
ambari-server启动成功，但是页面无法访问 作者：Bo liang链接：http://www.zhihu.com/question/34405898/answer/115001510来源：知乎著作权归作者所有，转载请联系作者获得授权。 1、先在命令行输入nproc命令。[root@Slav ...
分类：
Web程序 时间：
2016-09-09 06:25:17
阅读次数：
1506
Apache Ambari 2.4 发布了，Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控（腾云科技ty300.com）。Ambari目前已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zooke ...
分类：
Web程序 时间：
2016-09-08 09:49:47
阅读次数：
220
今天在查看ambari集群时，发现有一台服务器的磁盘统计没有数据，显示：ambaridiskusage:dataunavaliable.不知道是什么原因，去对应的机器上，在/var/log/ambari-metrics-monitor目录下，查看日志。tail-fambari-metrics-monitor.out，发现报如下错误：OSError:[Errno13]Permiss..
分类：
其他好文 时间：
2016-08-29 20:59:39
阅读次数：
145
1、ganglia简介Ganglia是一款为HPC（高性能计算）集群而设计的可扩展的分布式监控系统，它可以监视和显示集群中的节点的各种状态信息，它由运行在各个节点上的gmond守护进程来采集CPU、内存、硬盘利用率、I/O负载、网络流量情况等方面的数据，然后汇总到gmetad守护进程下，使用..
分类：
其他好文 时间：
2016-08-22 23:44:00
阅读次数：
1010
