一、kafka优点 高吞吐量、低延迟：kafka每秒可以处理几十万条消息，它的延迟最低只有几毫秒，每个topic可以分多个partition, consumer group 对partition进行consume操作。 可扩展性：kafka集群支持热扩展 持久性、可靠性：消息被持久化到本地磁盘，并且 ...
分类：
其他好文 时间：
2019-07-28 18:10:01
阅读次数：
100
KafkaManager 是雅虎开源的一款 针对kafka集群的web管理工具， 具体功能和介绍就不再这细讲 kafka-manager github官网 https://github.com/yahoo/kafka-manager 比较坑，github上仅提供了源码包，没有提供安装包，我们需要自己 ...
分类：
其他好文 时间：
2019-07-27 12:31:13
阅读次数：
1148
Kafka应用开发 Kafka的定义Kafka是一个高吞吐、分布式、基于发布订阅的消息系统Kafka有如下几个特点： Kafka的适用场景 使用Kafka的好处 解耦--使得消息生产、消费系统能够独立变更 可靠--有效解决单点故障引发系统不可用问题 易扩展--生产、消费系统扩展简单 可恢复--消息缓 ...
分类：
其他好文 时间：
2019-07-26 17:43:39
阅读次数：
145
一、搭建Zookeeper集群Zookeeper是一个分布式开源框架，提供了协调分布式应用的基本服务，它向外部应用暴露一组通用服务——分布式同步（DistributedSynchronization）、命名服务（NamingService）、集群维护（GroupMaintenance）等，简化分布式应用协调及其管理的难度，提供高性能的分布式服务。ZooKeeper本身可以以单机模式安装运行，不过它
分类：
其他好文 时间：
2019-07-16 10:26:02
阅读次数：
108
1.概述 Kafka Eagle是一款开源的Kafka集群监控系统，源代码托管在Github。目前Kafka Eagle已更新到V1.3.4版本，域名已经统一更新为http://www.kafka-eagle.org/，之前的下载地址和官网使用手册地址均已替换，例如http://download.s ...
分类：
其他好文 时间：
2019-07-14 21:27:33
阅读次数：
204
提前准备： 安装jdk-8u201-linux-x64.tar.gz环境 安装zk集群，也可以采用kafka自带的zk，这里我使用的是自己创建的zk集群 服务器IP: zk1:192.168.1.2 zk2:192.168.1.3 zk3:192.168.1.4 kafka:192.168.1.5 ...
分类：
其他好文 时间：
2019-07-10 16:34:03
阅读次数：
69
1相关文件说明 这一部分涉及相关配置文件的解析， 网络的启动涉及到多个文件，本文按以下顺序进行分析： 3.1 文件详解 先看一下文件内容: 3.2 文件详解 3.3 文件详解 3.4 文件详解 在fabric网络中，可以使用默认的levelDb数据库，或者使用CouchDb，该文件主要是对Couch ...
分类：
其他好文 时间：
2019-07-08 19:19:21
阅读次数：
86
（一）、简介kafka-manager是最受欢迎的kafka集群管理工具，有如下功能：管理多个集群轻松检查群集状态（主题，消费者，偏移，代理，副本分发，分区分发）运行首选副本选举使用选项生成分区分配以选择要使用的代理运行分区重新分配（基于生成的分配）使用可选主题配置创建主题（0.8.1.1具有与0.8.2+不同的配置）删除主题（仅支持0.8.2+并记住在代理配??置中设置delete.topic.
分类：
其他好文 时间：
2019-07-04 16:07:53
阅读次数：
248
ProducerConsumerBrokerTopicPartitionConsumer Group分布式 Broker Kafka集群包含一个或多个服务器，这种服务器被称为brokerTopic 每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic（物理上不同Topic的消息分开存 ...
分类：
其他好文 时间：
2019-07-03 13:20:53
阅读次数：
80
主题+客户端发布订阅的对象是主题（Topic）向主题发布消息的客户端应用程序称为生产者（Producer），生产者可以持续不断地向多个主题发送消息订阅这些主题消息的客户端应用程序称为消费者（Consumer），消费者能够同时订阅多个主题的消息生产者和消费者统称为客户端服务端Kafka的服务端由被称为Broker的服务进程构成，一个Kafka集群由多个Broker组成Broker负责接收和处理客户端
分类：
编程语言 时间：
2019-07-01 21:41:06
阅读次数：
169
