zookeeper采用了fast paxos算法，该算法比paxosa算法好的地方是解决了几个proposer交替发出提案，导致没有一个提案被批准的活锁问题。为什么需要zookeeper？我想有以下几个应用场景：1. 配置管理如果我们有很多服务程序需要有一些配置信息，可以保存在zookeeper的对应的znode中。zookeeper保证多个服务器同时对znode里面信息的修改是一致的。当然也可以...
分类：
其他好文 时间：
2015-02-28 14:40:25
阅读次数：
155
通过Watcher源码分析，可以更加清晰地理解Watcher的特性。 本文通过源码分析了设置Watcher，以及修改znode数据触发Watcher的过程。...
分类：
其他好文 时间：
2015-02-23 15:34:43
阅读次数：
321
在安装hbase中出现问题如下：ERROR: Can't get master address from ZooKeeper; znode data == null解决办法：1、删除namenode目录中/data/hadoop/tmp/dfs/namesecondary/current的文件2、为...
分类：
其他好文 时间：
2015-01-31 00:18:13
阅读次数：
119
NimbusServer相当于hadoop里的JobTracker或yarn里的ResourceManager，在集群中属于首脑地位，负责分发任务，监控集群状态，与supervisor的通信主要通过Zookeeper。nimbus在启动过程中会做以下工作，以保证集群稳定运行：
1、清理无效topology
2、建立zk连接并创建相应znode
3、启动监控线程
4、启动httpserver...
分类：
Web程序 时间：
2015-01-13 15:58:30
阅读次数：
403
其实zookeeper系列的学习总结很早就写完了，这段时间在准备找工作的事情，就一直没有更新了。下边给大家送上，文中如有不恰当的地方，欢迎给予指证，不胜感谢！。1. 数据模型1.1. 只适合存储小数据Zk维护着一个逻辑上的树形层次结构，树中的节点称为znode，个znode都有一个ACL（权限控制）...
分类：
其他好文 时间：
2014-12-09 17:26:07
阅读次数：
241
要求
客户端有四个要求:
这需要作为参数: zookpeer的服务地址、znode的名字、将输出写入到一个文件的名称、一个可执行的参数。
它与znode获取相关的数据并开始执行。
如果znode发生变化,重启客户端重新提取内容和可执行文件。
如果znode消失,客户端可进行线程销毁。
程序设计
一般来说,zookpeer应用被分解成两个部分,一个保持...
分类：
编程语言 时间：
2014-12-03 14:21:47
阅读次数：
271
1.为了解决分布式事务性一致的问题
2.文件系统也是一个树形的文件系统，但比linux系统简单，不区分文件和文件夹，所有的文件统一称为znode
3.znode的作用：存放数据，但上限是1M ;存放ACL(access control list)访问控制列表，每个znode被创建的时候，都会带有一个ACL，身份验证方式有三种：digest(用户名密码验证)，host(主机名验证)，ip(ip验...
分类：
其他好文 时间：
2014-11-30 00:41:16
阅读次数：
231
问题导读:1.zookeeper观察者什么时候调用？2.传统远程轮询服务存在什么问题？3.zk中回调服务的机制是什么？4.zk中watcher为什么不永久注册？5.什么是znode？在阅读之前首先明确个概念：1.什么是znode？2.什么是客户端？我们使用znode这个术语来表示ZooKeeper的...
分类：
其他好文 时间：
2014-10-29 21:13:22
阅读次数：
190
zookeeper一般用于distributed locking，并不适合用于distributed storage，因为zookeeper的每个node，也叫做znode的存储容量限制是1M。
zookeeper里的角色主要有client，leader和learner，其中learner也包括observer和follower。
client为请求的发起方，follower为...
分类：
其他好文 时间：
2014-10-03 12:25:44
阅读次数：
357
问题导读：1.ZooKeeper的数据模型是什么 ？2.ZooKeeper应用有哪些陷阱 ？3.每个节点（ZNode）中存储的是什么？4.一个ZNode维护了一个状态结构都包含了什么？5.ZNode组成结构是什么？6.Watches的机制是什么？7.ZooKeeper内置了哪4种方式实现ACL？前言...
分类：
其他好文 时间：
2014-09-29 11:19:00
阅读次数：
383
