这篇文章主要用来介绍Kafka & Zookeeper相关基础知识。 1. Kafka是由Linkedin开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景,之后于2 ...
分类:
编程语言 时间:
2020-07-15 23:49:56
阅读次数:
93
git:git@github.com:ccx19930930/services_register_and_discovery.git 参考链接:https://www.cnblogs.com/haippy/archive/2013/02/21/2920280.html 禁止拷贝基类: base_cl ...
分类:
编程语言 时间:
2020-07-15 13:05:04
阅读次数:
113
一、zookeeper集群介绍 zookeeper集群的目的是为了保证系统的性能承载更多的客户端连接设专门提供的机制。 通过集群可以实现以下功能: 读写分离:提高承载,为更多的客户端提供连接,并保障性能。 主从自动切换:提高服务容错性,部分节点故障不会影响整个服务集群。 因为 zookeeper 通 ...
分类:
其他好文 时间:
2020-07-14 00:41:44
阅读次数:
47
一,kafka是什么 kafka是一个分布式的发布-订阅消息系统,能够支持海量的数据传递,在高效和实时的消息处理业务系统中,kafka都有广泛应用,kafka将消息持久化到磁盘中,并且创建了备份保存了数据的安全,kafka在保证了较高的处理速度的同时,又能保证数据处理的低延迟和数据的零丢失。 二,特 ...
分类:
其他好文 时间:
2020-07-13 11:53:56
阅读次数:
60
1/28 P101、ZooKeeper--概述和特性 P202、ZooKeeper--集群角色 P303、ZooKeeper--集群搭建上--描述&JDK安装 P404、ZooKeeper--集群搭建下--配置文件修改&启动 P505、ZooKeeper--数据模型 P606、ZooKeeper-- ...
分类:
其他好文 时间:
2020-07-12 18:49:39
阅读次数:
99
Zookeeper 会维护一个具有层次关系的数据结构,它非常类似于一个标准的文件系统 zookeeper基于目录监听机制来选主,多个客户端节点都可以来对zookeeper上某个目录节点进行监听和注册,但只有其中一个能够注册上,谁能注册上谁就是主节点,主节点会保持着和zookeeper目录节点的长连接 ...
分类:
其他好文 时间:
2020-07-11 13:17:22
阅读次数:
80
topic相关 创建一个名为TEST的topic,分为10部分,每部分副本数量为3 /app/kafka_2.13-2.5.0/bin/kafka-topics.sh --zookeeper 1.1.1.3:2181 --create --topic TEST --partitions 10 --r ...
分类:
其他好文 时间:
2020-07-11 13:12:27
阅读次数:
37
一、下载zookeeper,kafka,java 1 网盘下载 版本号不能选:zookeeper-3.6.1,kafka_2.13-2.5.0,jdk-8u241 https://pan.baidu.com/share/init?surl=8cYaxW_8gDtM4wR32nH1Sg 提取码:g9g ...
分类:
其他好文 时间:
2020-07-11 13:00:59
阅读次数:
74
1 shell命令的zookeeper命令 启动zookeeper服务 bin/zkServer.sh start 连接zk服务 bin/zkCli.sh -server zk服务IP:Port 2 连接zk服务后的命令 查看连接zk服务器后可以使用的命令 help 2.1 节点的增删改查 创建持久 ...
分类:
其他好文 时间:
2020-07-11 12:30:22
阅读次数:
55