环境准备 zookeeper集群环境kafka是依赖于zookeeper注册中心的一款分布式消息对列,所以需要有zookeeper单机或者集群环境。 三台服务器: http://kafka.apache.org/downloads 中下载,目前最新版本的kafka已经到2.2.0,我这里之前下载的是 ...
分类:
系统相关 时间:
2019-08-03 15:09:43
阅读次数:
164
一、kafka优点 高吞吐量、低延迟:kafka每秒可以处理几十万条消息,它的延迟最低只有几毫秒,每个topic可以分多个partition, consumer group 对partition进行consume操作。 可扩展性:kafka集群支持热扩展 持久性、可靠性:消息被持久化到本地磁盘,并且 ...
分类:
其他好文 时间:
2019-07-28 18:10:01
阅读次数:
100
提前准备: 安装jdk-8u201-linux-x64.tar.gz环境 安装zk集群,也可以采用kafka自带的zk,这里我使用的是自己创建的zk集群 服务器IP: zk1:192.168.1.2 zk2:192.168.1.3 zk3:192.168.1.4 kafka:192.168.1.5 ...
分类:
其他好文 时间:
2019-07-10 16:34:03
阅读次数:
69
一、zookeeper集群搭建 kafka集群依赖于zookeeper的集群,搭建zookeeper集群的步骤此处省略。 二、下载解压 去官网下载http://kafka.apache.org/downloads 然后解压 三、修改配置文件 在config/server.properties中: 1 ...
分类:
其他好文 时间:
2019-06-11 16:18:02
阅读次数:
227
1、简介 Kafka is a distributed,partitioned,replicated commit logservice。它提供了类似于JMS的特性,但是在设计实现上完全不同,此外它并不是JMS规范的实现。kafka对消息保存时根据Topic进行归类,发送消息者成为Producer, ...
分类:
其他好文 时间:
2019-06-06 19:30:48
阅读次数:
134
一、kafka集群搭建 至于kafka是什么我都不多做介绍了,网上写的已经非常详尽了。 1. 下载zookeeper https://zookeeper.apache.org/releases.html 2. 下载kafka http://kafka.apache.org/downloads 3. ...
分类:
其他好文 时间:
2019-04-25 21:30:11
阅读次数:
307
在三台虚拟机中搭建一个kafka集群 1 安装jdk 详情参考这里:https://www.cnblogs.com/huyj99/p/10681654.html 2 安装zk集群 详情参考这里:https://www.cnblogs.com/huyj99/p/10677618.html 3 安装sc ...
分类:
其他好文 时间:
2019-04-10 13:22:54
阅读次数:
137
搭建kafka集群的基本环境需要安装JDK和zookeeper(或zookeeper集群) 下载kafaka安装包到服务器端并解压到指定目录 [root@hadoop01 soft]# wget https://www.apache.org/dyn/closer.cgi?path=/kafka/2.... ...
分类:
其他好文 时间:
2019-02-14 20:20:30
阅读次数:
166
1.kafka集群搭建 kafka安装包下载地址: 官网网址:http://kafka.apache.org/quickstart 中文官网:http://kafka.apachecn.org/quickstart.html 在windows平台,从官网下载:http://mirrors.hust.edu.cn/apache/kafka/1.1.0/&ems
分类:
其他好文 时间:
2018-12-30 23:21:22
阅读次数:
303