部署zk docker pull zookeeper docker run -d -v /data/zookeeper/zookeeperDataDir:/data -v /data/zookeeper/zookeeperDataLogDir:/datalog --name zookeeper01 ...
分类：
其他好文 时间：
2020-04-18 13:32:22
阅读次数：
57
一、什么是Zab算法 Zab借鉴了Paxos算法，是特别为Zookeeper设计的支持崩溃恢复的原子广播协议。基于该协议，zk实现了一种主备模型（即Leader和Follower模型）的系统架构来保证集群中各个副本之间数据的一致性。这里的主备系统架构模型，就是指只有一台客户端（Leader）负责处理 ...
分类：
其他好文 时间：
2020-04-18 09:37:24
阅读次数：
71
单节点NameNode存在问题： NameNode宕机，metadata数据消失； 单节点出现故障，如何进行故障转移？ 如果增加一个NameNode节点，会出现脑裂问题（一个集群有多个管理者），如何解决？ ZK搭建高可用（HA High Aliavble）HDFS集群 原理 QJM（Quorum J ...
分类：
其他好文 时间：
2020-04-17 20:34:00
阅读次数：
99
Zookeeper 本身也是集群，推荐配置不少于 3 个服务器。Zookeeper 自身也要保 证当一个节点宕机时，其他节点会继续提供服务。 如果是一个 Follower 宕机，还有 2 台服务器提供访问，因为 Zookeeper 上的数 据是有多个副本的，数据并不会丢失； 如果是一个 Leader ...
分类：
其他好文 时间：
2020-04-12 20:29:47
阅读次数：
79
一、首先，我们假设已经准备好三台互相联网的Linux机器，它们的IP地址分别为IP1、IP2和IP3。 二、配置文件zoo.cfg。初次使用ZooKeeper, 需要将%ZK_ HOME%/conf目录下的z00_ sample.cfg 文件重命名为zoo.cfg，并且按照如下代码进行简单配置即可: ...
分类：
其他好文 时间：
2020-04-09 12:38:57
阅读次数：
72
基础环境准备 安装前的准备工作（zk已经部署完毕） 关闭防火墙 service iptables stop #临时关闭 chkconfig iptables off && setenforce 0 #永久关闭 kafka单机版安装采用自带的zookeeper处理 1.校验一下java是否安装 jav ...
分类：
其他好文 时间：
2020-04-07 22:13:20
阅读次数：
98
./bin/hdfs zkfc -formatZK 初始安装时初始化zk，在Zookeeper中创建了路径/hadoop-ha/hacluster ./bin/hdfs haadmin -getServiceState master1 查看主节点的状态，是active还是standby ./bin/ ...
分类：
其他好文 时间：
2020-04-01 19:33:47
阅读次数：
55
K8S使用Statefulset管理zk集群pod
分类：
其他好文 时间：
2020-03-30 00:23:18
阅读次数：
108
一：创建永久节点 二：获取节点数据 三：设置节点数据 ...
分类：
其他好文 时间：
2020-03-26 21:35:08
阅读次数：
53
1 环境准备 1.1 修改IP 1.2 修改主机名及主机名和IP地址的映射 1.3 关闭防火墙 1.4 ssh免密登录 1.5 安装JDK，配置环境变量 2 集群规划 节点名称 NN JJN DN ZKFC ZK RM NM linux1 NameNode JournalNode DataNode ...
分类：
其他好文 时间：
2020-03-24 15:39:44
阅读次数：
82
