一、kafka-manager 简介 为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀,或者是分区在整个集群分布不均匀的的情况。它支持管理 ...
分类:
其他好文 时间:
2019-04-14 22:59:07
阅读次数:
541
安装kafkamanager[root@emm-kafka01-10--174~]#cd/opt/ins/[root@emm-kafka01-10--174ins]#lltotal292188-rwxr-xr-x1rootroot166044032Mar1315:58jdk-8u102-linux-x64.rpm-rw-r--r--1rootroot50326212Mar1316:14kafka_
分类:
其他好文 时间:
2019-03-14 11:57:21
阅读次数:
148
1.kafka Manager 添加集群: 集群信息: 添加主题; 重新获取平衡 分区数、节点数、Brokers Spread节点分布比例(如一共3个节点,主题占了3个节点所以分布比例是100%,如果有3个节点主题只占1个,则33% ) Brokers Skew节点倾斜度、(1个Topic--3个分 ...
分类:
其他好文 时间:
2019-03-03 09:41:10
阅读次数:
374
一.kafka-manager简介 kafka-manager是目前最受欢迎的kafka集群管理工具,最早由雅虎开源,用户可以在Web界面执行一些简单的集群管理操作。具体支持以下内容: 管理多个集群 轻松检查群集状态(主题,消费者,偏移,代理,副本分发,分区分发) 运行首选副本选举 使用选项生成分区 ...
分类:
其他好文 时间:
2019-02-03 10:36:44
阅读次数:
226
为了能够方便的查看及管理Kafka集群,yahoo提供了一个基于Web的管理工具(Kafka-Manager)。 这个工具可以方便的查看集群中Kafka的Topic的状态(分区、副本及消息量等),支持管理多个集群、重新分配Partition及创建Topic等功能。 jdk、sbt自行安装吧 sbt源 ...
分类:
其他好文 时间:
2019-01-11 15:55:05
阅读次数:
368
一、前言 为什么要设计kafka告警方案?现成的监控项目百度一下一大堆,KafkaOffsetMonitor、KafkaManager、 Burrow等,具体参考:kafka的消息挤压监控。由于本小组的项目使用的kafka集群并没有被公司的kafka-manager管理,所以只能自己简单做一个告警。 ...
分类:
其他好文 时间:
2018-12-04 17:12:53
阅读次数:
124
kafka-manager配置 最主要配置就是用于kafka管理器状态的zookeeper主机。这可以在conf目录中的application.conf文件中找到。 当然也可以声明为zookeeper集群。 另外也可以通过环境变量ZK_HOSTS来表示。 自定义kafka-manager功能,类似于 ...
分类:
其他好文 时间:
2018-11-20 01:26:58
阅读次数:
277
Kafka + zookeeper 的搭建部署,以及 kafka-manager 部署管理、监控 kafka 集群。
分类:
其他好文 时间:
2018-11-11 17:59:23
阅读次数:
176
参考博文:Kafka消费组(consumer group) 参考博文:kafka 1.0 中文文档(九):操作 参考博文:kafka集群管理工具kafka-manager部署安装 以下操作可以在mini01、mini02、mini03任意一台操作即可。 1. kafka通过网页管理 参考博文:kaf ...
分类:
其他好文 时间:
2018-09-23 16:32:08
阅读次数:
173
一.kafka-manager简介 kafka-manager是目前最受欢迎的kafka集群管理工具,最早由雅虎开源,用户可以在Web界面执行一些简单的集群管理操作。具体支持以下内容: 管理多个集群 轻松检查群集状态(主题,消费者,偏移,代理,副本分发,分区分发) 运行首选副本选举 使用选项生成分区 ...
分类:
其他好文 时间:
2018-09-05 00:44:41
阅读次数:
288