本文介绍了ResourceManager的HA特性，并详细描述了如何配置RM的HA及自动故障转移...
分类：
其他好文 时间：
2014-12-04 18:04:28
阅读次数：
243
HadoopCDH5.0.1分布式系统，包括NameNode，ResourceMangerHA，忽略了WebApplicationProxy和JobHistoryServer。一概述（一）HDFS1）基础架构（1）NameNode（Master）命名空间管理：命名空间支持对HDFS中的目录、文件和块做类似文件系统的创建、修改、删除、列表文件和目录等基本..
分类：
其他好文 时间：
2014-12-03 07:09:21
阅读次数：
213
在yarn中对yarn.nodemanager.local-dirs的状态更新操作，定义在LocalDirsHandlerService（org.apache.hadoop.yarn.server.nodemanager.LocalDirsHandlerService）相关类中，在nm启动时，会启动一个LocalDirsHandlerService服务，循环检测yarn.nodemanager.local-dirs和yarn.nod..
分类：
其他好文 时间：
2014-12-02 00:15:42
阅读次数：
296
Hadoop
Yarn的安装部署于Hadoop类似，以下以CDH4.5为例说明安装步骤。
三台机器，修改/etc/hosts及/etc/sysconfig/network中的HOSTNAME：
172.20.4.142 yarn-namenode
172.20.4.143 yarn-datanode1
172.20.4.147 yarn-d...
分类：
其他好文 时间：
2014-11-24 20:57:36
阅读次数：
298
协议ApplicationClientProtocol Hadoop-Yarn?源码阅读-Yarn? client与ResourceManager之间的协议，用来 提交、中止作业 获取应用信息、集群metrics信息、节点信息、队列信息和ACL信息 各接口说明：
...
分类：
移动开发 时间：
2014-11-21 10:56:02
阅读次数：
490
Yarn的JVM重用功能——uberhttp://blog.csdn.net/samhacker/article/details/15692003Hadoop：TheDefinitiveGuid总结Chapter6MapReduce的工作原理http://www.cnblogs.com/biyeymyhjob/archive/2012/08/11/2631750.html浅谈hadoop中mapreduce的文件分发http://blog.csdn.net/zgc..
分类：
其他好文 时间：
2014-11-19 02:09:20
阅读次数：
179
最近在读Hadoop#Yarn部分的源码，读到状态机那一部分的时候，感到enmu的用法实在是太灵活了，在给并发编程网翻译一篇文章的时候，正好碰到一篇这样的文章，就赶紧翻译下来，涨涨姿势。
原文链接：http://www.javacodegeeks.com/2011/07/java-secret-using-enum-to-build-state.html
作者：Peter Lawrey...
分类：
编程语言 时间：
2014-11-17 14:10:07
阅读次数：
301
Apache Hadoop YARN： 背景及概述
分类：
Web程序 时间：
2014-11-05 22:42:15
阅读次数：
205
Apache Samza is a distributed stream processing framework. It uses Apache
Kafka for messaging, and Apache
Hadoop YARN to provide fault tolerance, processor isolation, security, and resource manage...
分类：
其他好文 时间：
2014-11-02 16:36:31
阅读次数：
255
1. 安装环境介绍如下：
系统：Ubuntu14.04
Hadoop版本：hadoop-2.5.0（点击下载）
Java版本：openjdk-1.7.0_55
Eclipse版本：Release 4.4.0 (点击下载)...
分类：
系统相关 时间：
2014-10-30 21:00:26
阅读次数：
782
