ClouderaCertifiedAdministratorforApacheHadoop(CCA-500)NumberofQuestions:60questionsTimeLimit:90minutesPassingScore:70%Language:English,JapaneseExamSectionsandBlueprint1.HDFS(17%)DescribethefunctionofHDFSdaemonsDescribethenormaloperationofanApacheHadoopclust..
分类：
其他好文 时间：
2016-06-28 14:40:09
阅读次数：
607
Ambari是Hortonworks出一款开源Hadoop管理系统，是用python写的，目前市场是开源的Hadoop管理系统好像就只有这一个，虽然Ambari问题很多，也不好用，但也没办法了。最近监控系统经常报警说一个url老是不可达，只是一个ambari服务器的url。于是登录到服务器上一探究竟。用iftop..
分类：
其他好文 时间：
2016-06-20 22:31:30
阅读次数：
541
1 前言首先要陪只好HBase，可以参见http://www.cnblogs.com/liuchangchun/p/4096891.html，完全分布式类似2 HBase配置2.1 HUE 配置文件设置，找到hbase标签，配置如下# Comma-separated list of HBase Th...
分类：
其他好文 时间：
2015-08-29 21:36:28
阅读次数：
283
1 前言首先要配置好Hive，可以参见：http://www.cnblogs.com/liuchangchun/p/4761730.html2 hive配置找到beeswax标签，不叫hive，配置如下属性，其中端口号要和hive-site.xml中的保持一致hive-site.xml中配置thri...
分类：
其他好文 时间：
2015-08-27 18:25:57
阅读次数：
166
HUE安装完成之后，第一次登录的用户就是HUE的超级用户，可以管理用户，等等。但是在用的过程发现一个问题这个用户不能管理HDFS中由supergroup创建的数据。虽然在HUE中创建的用户可以管理自己文件夹下面的数据/user/XXX。那么Hadoop superuser的数据怎么管理呢，ＨＵＥ.....
分类：
其他好文 时间：
2015-07-20 22:58:44
阅读次数：
545
安装HUE之后，需要配置很多东西才能将这个系统的功能发挥出来，因为Yarn是配置的HA模式，所以在配置HUE的时候，会有些不用，下面一段文字是官网拿来的 # Configuration for YARN (MR2) # --------------------------------------.....
分类：
其他好文 时间：
2015-07-18 21:11:50
阅读次数：
169
机器环境Ubuntu 14.10 64位 || OpenJDK-7 || Scala-2.10.4机群概况Hadoop-2.6.0 || HBase-1.0.0 || Spark-1.2.0 || Zookeeper-3.4.6 || hue-3.8.1Hue简介（摘自网络）：ue是一个开源的Apa...
分类：
其他好文 时间：
2015-07-18 12:23:16
阅读次数：
550
1、Azkaban是什么
我们在工作中应该都遇到过这样的场景：有一个任务，这个任务可以划分成多个较小的任务完成，之所以进行划分是因为小任务之间可以并发的进行，例如是一个shell脚本执行的命令吧，大任务A可以划分成B、C、D、E四个子任务（脚本）完成，而B和C是可以同时进行的，D依赖B和C的输出，E又依赖D的输出，于是我们一般的做法可能就是开两个终端同时执行B和C，等两个都...
分类：
其他好文 时间：
2015-01-23 18:18:18
阅读次数：
336
前言接触Hadoop有两年的时间了，期间遇到很多的问题，既有经典的NameNode和JobTracker内存溢出故障，也有HDFS存储小文件问题，既有任务调度问题，也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷（短板），有些则是使用的不当。在解决问题的过程中，有时需要翻源...
分类：
其他好文 时间：
2015-01-15 12:17:12
阅读次数：
150
前言接触Hadoop有两年的时间了，期间遇到很多的问题，既有经典的NameNode和JobTracker内存溢出故障，也有HDFS存储小文件问题，既有任务调度问题，也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷（短板），有些则是使用的不当。在解决问题的过程中，有时需要翻源...
分类：
其他好文 时间：
2014-09-07 14:46:55
阅读次数：
449
