一.安装部署zookeeper 2.zookeeper服务管理命令 启动ZK服务: zkServer.sh start 查看ZK状态: zkServer.sh status 停止ZK服务: zkServer.sh stop 重启ZK服务: zkServer.sh restart ...
分类:
系统相关 时间:
2020-06-29 22:56:07
阅读次数:
83
Zookeeper集群搭建 安装环境: 系统:centos7.6 Java环境:JDK8 关闭这三台机器的防火墙,sellinux 主机188、189、190分别已经部署了单机的zk。单机安装请看我上一篇博客。 https://www.cnblogs.com/hsyw/p/13204017.html ...
分类:
其他好文 时间:
2020-06-29 16:56:06
阅读次数:
89
注:安装的kafka版本为kafka_2.10-0.8.2.1,zookeeper版本选的是zookeeper-3.4.14 一.下载zookeeper 官网下载zookeeper-3.4.14.tar.gz,解压到相应目录下: 解压后的目录包含(修改conf目录下的zoo_sample.cfg文件 ...
分类:
其他好文 时间:
2020-06-29 11:27:17
阅读次数:
50
其实就是水平扩容了,Zookeeper 在这方面不太好。两种方式: 全部重启:关闭所有 Zookeeper 服务,修改配置之后启动。不影响之前客户端的 会话。 逐个重启:在过半存活即可用的原则下,一台机器重启不影响整个集群对外提供 服务。这是比较常用的方式。 3.5 版本开始支持动态扩容。 ...
分类:
其他好文 时间:
2020-06-29 09:23:51
阅读次数:
32
Zookeeper 本身也是集群,推荐配置不少于 3 个服务器。Zookeeper 自身也要保 证当一个节点宕机时,其他节点会继续提供服务。 如果是一个 Follower 宕机,还有 2 台服务器提供访问,因为 Zookeeper 上的数 据是有多个副本的,数据并不会丢失; 如果是一个 Leader ...
分类:
其他好文 时间:
2020-06-29 09:20:23
阅读次数:
73
ZAB 协议是为分布式协调服务 Zookeeper 专门设计的一种支持崩溃恢复的原子广 播协议。 ZAB 协议包括两种基本的模式:崩溃恢复和消息广播。 当整个 zookeeper 集群刚刚启动或者 Leader 服务器宕机、重启或者网络故障导 致不存在过半的服务器与 Leader 服务器保持正常通信 ...
分类:
其他好文 时间:
2020-06-29 09:14:54
阅读次数:
60
Zookeeper安装 安装环境: 系统:centos7.6 Java环境:JDK8 zookeeper安装需要java环境,怎么配置请看 https://www.cnblogs.com/hsyw/p/13203495.html 1、下载zookeeper wget https://mirrors. ...
分类:
其他好文 时间:
2020-06-28 19:00:55
阅读次数:
56
一.集群规划 Name Master Slave1 Slave2 IP 192.168.2.98 192.168.2.99 192.168.2.100 Jdk版本 1.8.0.171 1.8.0.171 1.8.0.171 Zookeeper版本 3.4.10 3.4.10 3.4.10 Hadoo ...
分类:
其他好文 时间:
2020-06-26 16:25:56
阅读次数:
66
①编辑core-site.xml,添加内容如下: <!--指定hdfs的nameservice,为整个集群起一个别名,在zookeeper上注册的名称--> <property> <name>fs.defaultFS</name> <value>hdfs://ns</value> </propert ...
分类:
其他好文 时间:
2020-06-26 16:18:37
阅读次数:
53
Hadoop 生态系统 Hbase:HBase 是一个建立在 HDFS 之上,面向列的 NoSQL 数据库,用于快速读 / 写大量数据,HBase 使用 Zookeeper 进行管理。 Zookeeper:用于 Hadoop 的分布式协调服务。Hadoop 的许多组件依赖于 Zookeeper,它运 ...
分类:
其他好文 时间:
2020-06-26 14:54:11
阅读次数:
64