在Kafka中，LogManager负责管理broker上所有的Log（每一个topic-partition为一个Log）。通过阅读源代码可知其具体完成的功能如下：
1. 按照预设规则对消息队列进行清理。
2. 按照预设规则对消息队列进行持久化（flush操作）。
3. 连接ZooKeeper进行broker、topic、partition相关的ZooKeeper操作。
4. 管理brok...
分类：
其他好文 时间：
2014-06-28 08:25:21
阅读次数：
208
http://www.zlovezl.cn/articles/40/简介： Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。具体简介可以参照这....
分类：
编程语言 时间：
2014-06-26 18:43:35
阅读次数：
281
zookeeper java调用 及 权限管理...
分类：
编程语言 时间：
2014-06-26 10:30:19
阅读次数：
206
Hbase是一个分布式,版本化(versioned)，构建在 Apache Hadoop和 Apache ZooKeeper上的列数据库.本文使用默认的Zookeeper，构造HDFS基础上的分布式Hbase。1 安装环境操作系统：Ubuntu-12.04 JDK版本：jdk1.7.0_51 计算....
分类：
其他好文 时间：
2014-06-26 00:31:04
阅读次数：
302
本文详细讲解了Spark在Standalone模式下的Master的HA的源码分析。
为了解决Standalone模式下的Master的SPOF，Spark采用了ZooKeeper提供的选举功能。Spark并没有采用ZooKeeper原生的Java API，而是采用了Curator，一个对ZooKeeper进行了封装的框架。采用了Curator后，Spark不用管理与ZooKeeper的连接，这些对于Spark来说都是透明的。Spark仅仅使用了100行代码，就实现了Master的HA。当然了，Spark是...
分类：
其他好文 时间：
2014-06-25 07:59:09
阅读次数：
183
最近又翻译了一篇关于Docker的文章，内容是Docker发布的一个安全漏洞以及应对方法，地址在docker中文社区的《突破DOCKER容器的漏洞验证代码》其实我十来年前做过一段时间的系统安全，还结识了安全圈里一帮兄弟，后来我转行做了存储，也一直在关注安全领域。这一两年安全行业迅..
分类：
其他好文 时间：
2014-06-24 16:22:51
阅读次数：
244
工欲善其事，必先利其器。 在我们以后的Docker学习中，都推荐使用CentOS6.5作为学习平台，毕竟Docker的内核也是基于Linux的。本文主要分享笔者在CentOS下的安装Docker的过程。 安装环境：CentOS6.5。第一步： 首先进入Docker的官方文档，我们迅速找到C...
分类：
其他好文 时间：
2014-06-23 00:09:12
阅读次数：
316
近日“轻量级虚拟化”成为了一个热门话题。它也称为“操作系层的虚拟化”，它允许您在一个主机上运行多个应用程序或系统管理程序。优点是显而易见的：由于它没有间隔在主机硬件和操作系统之间的hypervisor虚拟化管理层，以实现更有效的资源利用。由此带来的效益是，减少了虚拟化开销，同时仍然允许在一个服务器中分离并隔离多个任务。因此，“轻量级虚拟化”在以资料使用为关键业务的环境中是非常吸引人的，比如服务器托管或外包业务（如：云计算、大数据等）。...
分类：
系统相关 时间：
2014-06-22 20:01:16
阅读次数：
374
1.Zookeeper是什么？
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务。ZooKeeper的设计非常易于编程，它使用的是类似于文件系统那样的树形数据结构。他的数据都存在内存中，所以速度非常快，当然为了避免内存数据的丢失，所以数据也可以同时保存在硬盘上。
2.Zookeeper能做什么？
场景一：有一组服务器向客户端提供某种服务（例如：我前面做的分布式网...
分类：
其他好文 时间：
2014-06-22 16:55:46
阅读次数：
216
