zk 为了实现Paxos算法的快速收敛,添加Leader选举算法,只有Leader角色才可以发起提案。为了熟悉并使用zk,近来也具体看了zk(3.4.8)部分代码,主要逻辑(集群模式)分析如下: １. zk启动,zk启动脚本是zkServer.sh 调用 (org.apache.zookeeper. ...
分类：
其他好文 时间：
2016-09-04 14:31:28
阅读次数：
153
一、Zookeeper的搭建方式 Zookeeper安装方式有三种，单机模式和集群模式以及伪集群模式。 ■ 单机模式：Zookeeper只运行在一台服务器上，适合测试环境；■ 伪集群模式：就是在一台物理机上运行多个Zookeeper 实例；■ 集群模式：Zookeeper运行于一个集群上，适合生产环 ...
分类：
其他好文 时间：
2016-08-29 12:39:25
阅读次数：
174
主从模式 主节点有单点故障问题：没有主从自动切换，没有failover，主机down掉了的话，整个数据变成只读。并且需要一台机单独做索引，浪费资源，所有数据都需要在这台机器上单独存在一份，索引变化较大的时候同步会占用很大的带宽和资源。 配置文件改动：改动了solrconfig.xml最终还是要手动上 ...
分类：
其他好文 时间：
2016-06-24 12:12:23
阅读次数：
161
本篇博客将围绕Hadoop伪分布安装+MapReduce运行原理+基于MapReduce的KNN算法实现这三个方面进行叙述。
（一）Hadoop伪分布安装1、简述Hadoop的安装模式中–伪分布模式与集群模式的区别与联系.
Hadoop的安装方式有三种:本地模式,伪分布模式,集群(分布)模式,其中后两种模式为重点,有意义
伪分布:如果Hadoop对应的Java进程都运行在一个物理机器上,称为伪...
分类：
编程语言 时间：
2016-06-16 14:41:00
阅读次数：
370
问题描述： 在集群模式下更改节点后，启动集群发现 datanode一直启动不起来。 我集群配置：有5个节点，分别为master slave1-5 。 在master以Hadoop用户执行：start-all.sh jps查看master节点启动情况： NameNode JobTracker Seco ...
分类：
其他好文 时间：
2016-06-13 13:21:53
阅读次数：
180
前一篇文章介绍了Zookeeper的单机模式的安装及应用，但是Zookeeper是为了解决分布式应用场景的，所以通常都会运行在集群模式下。今天由于手头机器不足，所以今天打算在一台机器上部署三个Zookeeper服务来组成一个Zookeeper集群。这里解压Zookeeper的安装包到/opt目录下， ...
分类：
其他好文 时间：
2016-05-27 16:31:23
阅读次数：
226
转载自:http://www.cnblogs.com/sunddenly/p/4018459.html 一、Zookeeper的搭建方式 Zookeeper安装方式有三种，单机模式和集群模式以及伪集群模式。 ■ 单机模式：Zookeeper只运行在一台服务器上，适合测试环境；■ 伪集群模式：就是在一... ...
分类：
其他好文 时间：
2016-05-25 09:26:12
阅读次数：
173
一、zookeeper
Zookeeper 是 Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等
Zookeeper服务器集群规模不小于3个节点，要求各服务器之间系统时间要保持一致。ZooKeeper的搭建是为了后面HBase的使用。
二、集群模式搭建
我的集群是Hadoop...
分类：
其他好文 时间：
2016-05-13 03:14:19
阅读次数：
134
本文环境如下：
操作系统：CentOS 6 32位
JDK版本：1.8.0_77 32位
Kafka版本：0.9.0.1(Scala 2.11)
1. 所需要的环境Kafka需要以下运行环境：
Java 安装参考CentOS 6使用rpm方式安装JDK8
Zookeeper 安装参考：CentOS下ZooKeeper单机模式、集群模式安装2. 下载、解压Kafka安装包Ka...
分类：
其他好文 时间：
2016-05-12 17:54:50
阅读次数：
282
本文环境如下：
操作系统：CentOS 6 32位
JDK版本：1.8.0_77 32位
Kafka版本：0.9.0.1(Scala 2.11)
接上篇 Kafka单机、集群模式安装详解(一)6. 单节点多Broker模式Kafka使用可以有多种模式，包括单节点单Broker,单节点多Broker,多节点多Broker。
这里我们简单区分一下：
单节点单Broker：在单台机子...
分类：
其他好文 时间：
2016-05-12 17:54:31
阅读次数：
199
