今天安装了hbase想做下测试，结果发现在创建表时报错“can't get master address from zookeeper, zookeeper date = null”，大致是这样描述的，之后查看日志，发现hbase在启动zookeeper时确实报错了，查阅了网上的资料，说hbas.....
分类：
其他好文 时间：
2014-08-06 17:27:52
阅读次数：
218
前言: Thrift作为Facebook开源的RPC框架, 通过IDL中间语言, 并借助代码生成引擎生成各种主流语言的rpc框架服务端/客户端代码. 不过Thrift的实现, 简单使用离实际生产环境还是有一定距离, 本系列将对Thrift作代码解读和框架扩充, 使得它更加贴近生产环境. 本文讲述.....
分类：
其他好文 时间：
2014-08-05 18:33:29
阅读次数：
295
Zookeeper使用了一种称为Zab（ZookeeperAtomic Broadcast）的协议作为其一致性复制的核心，其特点为高吞吐量、低延迟、健壮、简单，但不过分要求其扩展性。
Zookeeper的实现是有Client、Server构成，Server端提供了一个一致性复制、存储服务，Client端会提供一些具体的语义，比如分布式锁、选举算法、分布式互斥等。从存储内容来说，Server端更多...
分类：
其他好文 时间：
2014-08-01 19:53:12
阅读次数：
309
分布式架构是中心化的设计，就是一个主控机连接多个处理节点,因此保证主控机高可用性十分关键.分布式锁是解决该问题的较好方案,多主控机抢一把锁.Zookeeper就是一套分布式锁管理系统,用于高可靠的维护元数据....
分类：
其他好文 时间：
2014-08-01 13:50:51
阅读次数：
230
最近在考虑分布式环境下配置中心实现。
对于配置中心很难设计。
光用Zookeeper吧，发现一是跨语言支持不好，需要大量跨语言支持的开发，而且没办法在上面增加大量的算法和逻辑。
如果在Zookeeper前面加一层服务的话，又怕成为单点压力。
下面是我画的一个架构图，希望大家帮忙看看，踊跃讨论。...
分类：
其他好文 时间：
2014-08-01 02:28:51
阅读次数：
244
Kafka集群配置比较简单，为了更好的让大家理解，在这里要分别介绍下面三种配置
单节点：一个broker的集群单节点：多个broker的集群多节点：多broker集群
一、单节点单broker实例的配置
1.首先启动zookeeper服务
Kafka提供了一个简单的zookeeper配置文件来帮助启动zookeeper实例，用下面这个命令即可，首先进入Kafka的安装...
分类：
其他好文 时间：
2014-07-31 20:59:27
阅读次数：
334
本日志由系统自动生成。
从7月14日起便按照心想事成的节奏进入了实验室。打酱油。周末又去学活值班，生活的框架还是很不错的。
1、基于Hadoop的Flume，zooKeeper，这些东西算是明白了个大概。
2、第一周大概学习了javascript、jquery、css、ci框架（php）这些基本的东...
分类：
其他好文 时间：
2014-07-30 00:41:42
阅读次数：
279
Zookeeper是hadoop的一个子项目，虽然源自hadoop，但是我发现zookeeper脱离hadoop的范畴开发分布式框架的运用越来越多。今天我想谈谈zookeeper，本文不谈如何使用zookeeper，而是zookeeper到底有哪些实际的运用，哪些类型的应用能发挥zookeeper的优势，最后谈谈zookeeper对分布式网站架构能产生怎样的作用。
Zookeeper是针...
分类：
其他好文 时间：
2014-07-29 21:55:32
阅读次数：
294
再分布式系统中，ACL(Access Control)十分重要；Zookeeper也提供了十分好用的ACL接口，下面我记录一下在nodejs下如何实现zookeeper的访问控制。
Zookeeper的ACL通常表示为：Scheme:Id:Permission，即Scheme,Id,Permission三个部分。其中，Scheme表示使用何种方式来进行访问控制，Id代表用户，Perm...
分类：
其他好文 时间：
2014-07-29 12:57:37
阅读次数：
266
最近研究了下NameNodeHAAutomaticFailover方面的东西，当ActiveNN因为异常或其他原因不能正常提供服务时，处于Standby状态的NN就可以自动切换为Active状态，从而到达真正的高可用NNHAAutomaticFailover架构图为了实现自动切换，需要依赖ZooKeeper和ZKFC组件，ZooKeeper主要用来..
分类：
其他好文 时间：
2014-07-26 03:27:38
阅读次数：
392
