1.目标 今天，在这篇Kafka文章中，我们将看到Kafka Cluster Setup。这个Kafka集群教程为我们提供了一些设置Kafka集群的简单步骤。简而言之，为了实现Kafka服务的高可用性，我们需要在集群模式下设置Kafka。 因此，在此Kafka Cluster文档中，我们将学习Kaf ...
分类：
其他好文 时间：
2019-05-11 21:09:35
阅读次数：
146
问题导读： 1.zookeeper在kafka的作用是什么？ 2.kafka中几乎不允许对消息进行“随机读写”的原因是什么？ 3.kafka集群consumer和producer状态信息是如何保存的？ 4.partitions设计的目的的根本原因是什么？ 一、入门 1、简介 Kafka is a d ...
分类：
其他好文 时间：
2019-05-08 15:56:20
阅读次数：
114
一、事前准备 1.kafka官网：http://kafka.apache.org/downloads. 2.选择使用版本下载. 3.kafka集群环境准备:（linux） 192.168.145.129 主机名：kafka01 192.168.145.130 kafka02 192.168.145. ...
分类：
其他好文 时间：
2019-05-03 22:49:27
阅读次数：
179
Top NSD ARCHITECTURE DAY07 案例1：Zookeeper安装 步骤一：安装Zookeeper 案例2：Kafka集群实验 案例3：Hadoop高可用 案例4：高可用验证 1 案例1：Zookeeper安装 1.1 问题 本案例要求： 搭建Zookeeper集群并查看各服务器的 ...
分类：
其他好文 时间：
2019-04-28 18:49:56
阅读次数：
202
一、kafka集群搭建 至于kafka是什么我都不多做介绍了，网上写的已经非常详尽了。 1. 下载zookeeper https://zookeeper.apache.org/releases.html 2. 下载kafka http://kafka.apache.org/downloads 3. ...
分类：
其他好文 时间：
2019-04-25 21:30:11
阅读次数：
307
Kafka集群部署 1）解压安装包 [ip101]$ tar zxvf kafka_2.11 0.11.0.0.tgz C /opt/app/ 2）修改解压后的文件名称 [ip101]$ mv kafka_2.11 0.11.0.0/ kafka 3）在/opt/app/kafka目录下创建logs ...
分类：
其他好文 时间：
2019-04-15 16:06:39
阅读次数：
122
一、kafka-manager 简介 为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀，或者是分区在整个集群分布不均匀的的情况。它支持管理 ...
分类：
其他好文 时间：
2019-04-14 22:59:07
阅读次数：
541
kafka集群介绍（安装配置、扩容、监控）说明：由于测试环境机器有限，这里就在一台机器上搭建伪集群环境kafka说明：一个Topic可以认为是一类消息，每个topic将被分成多个partition(区)，,此外kafka还可以配置partitions需要备份的个数(replicas)。有多少个partitions就意味着有多少个"leader",kafka会将"lea
分类：
其他好文 时间：
2019-04-11 09:15:24
阅读次数：
134
在三台虚拟机中搭建一个kafka集群 1 安装jdk 详情参考这里：https://www.cnblogs.com/huyj99/p/10681654.html 2 安装zk集群 详情参考这里：https://www.cnblogs.com/huyj99/p/10677618.html 3 安装sc ...
分类：
其他好文 时间：
2019-04-10 13:22:54
阅读次数：
137
kafka集群有权限校验，在连接时需要加入client.id。但pykafka不能配置该选项。搜索了一下，需要使用confluent kafka 链接： https://blog.csdn.net/lanyang123456/article/details/80639625 ...
分类：
编程语言 时间：
2019-04-08 21:43:46
阅读次数：
423
