目录 一、Kafka监控的几个指标 二、查看zookeeper配置 三、查看kafka配置 四、查看kafka的group name 五、查看kafka的topic_name 六、修改zabbix配置文件 七、创建监控脚本 八、给脚本和对应文件权限 九、重启zabbix 十、监控上增加3个键值 正文 ...
分类：
其他好文 时间：
2021-03-03 12:11:41
阅读次数：
0
Kafka监控安装Kafka集群监控方案选择：Kafka只能依靠kafka-run-class.sh等命令进行管理KafkaManager（CMAK）是目前比较常用的监控工具，它有如下功能：管理多个集群轻松检查群集状态（主题，消费者，偏移，代理，副本分发，分区分发）运行首选副本选举使用选项生成分区分配以选择要使用的代理运行分区重新分配（基于生成的分配）使用可选主题配置创建主题（0.8.1.1具有与
分类：
其他好文 时间：
2020-07-10 09:39:18
阅读次数：
259
Kafka快速入门（七）——Kafka监控一、Kafka监控指标1、Kafka主机监控指标主机监控是监控Kafka集群Broker所在的节点机器的性能。常见的主机监控指标包括：（1）机器负载（Load）（2）CPU使用率（3）内存使用率，包括空闲内存（FreeMemory）和已使用内存（UsedMemory）（4）磁盘I/O使用率，包括读使用率和写使用率网络（5）I/O使用率（6）TCP连接数（7
分类：
其他好文 时间：
2020-05-26 10:38:25
阅读次数：
75
对于大数据集群来说，监控功能是非常必要的，通过日志判断故障低效，我们需要完整的指标来帮我们管理Kafka集群。本文讨论Kafka的监控以及一些常用的第三方监控工具。 一、Kafka Monitoring 首先介绍kafka的监控原理，第三方工具也是通过这些来进行监控的，我们也可以自己去是实现监控，官 ...
分类：
其他好文 时间：
2019-08-23 12:00:44
阅读次数：
214
一、Kafka监控的几个指标 1、lag：多少消息没有消费 lag=logsize-offset2、logsize：Kafka存的消息总数 3、offset：已经消费的消息 Kafka管理工具 介绍： https://www.iteblog.com/archives/1605.html Kafka管 ...
分类：
其他好文 时间：
2019-05-31 21:21:57
阅读次数：
137
概述 Kafka Eagle监控系统是一款用来监控Kafka集群的工具，目前更新的版本是v1.2.3，支持管理多个Kafka集群、管理Kafka主题（包含查看、删除、创建等）、消费者组合消费者实例监控、消息阻塞告警、Kafka集群健康状态查看等。 安装与使用 1.下载 https://codeloa ...
分类：
其他好文 时间：
2018-12-31 22:43:38
阅读次数：
852
topic：创建时topic名称 partition：分区编号 offset：表示该parition已经消费了多少条message logSize：表示该partition已经写了多少条message Lag：表示有多少条message没有被消费。 Owner：表示消费者 Created：该part ...
分类：
其他好文 时间：
2018-07-12 20:08:05
阅读次数：
134
Kafka Monitor 为Kafka的可视化管理与监控工具，为Kafka的稳定运维提供高效、可靠、稳定的保障，这里主要简单介绍Kafka Monitor的相关功能与页面的介绍； Kafka Monitor v0.1 主要功能有： Kafka基本信息仪表盘、broker列表、topic列表、当前消 ...
分类：
其他好文 时间：
2018-02-22 21:37:43
阅读次数：
129
由于项目原因，最近经常碰到Kafka消息队列拥堵的情况。碰到这种情况为了不影响在线系统的正常使用，需要大家手动的清理Kafka Log。但是清理Kafka Log又不能单纯的去删除中间环节产生的日志，中间关联的很多东西需要手动同时去清理，否则可能会导致删除后客户端无法消费的情况。 在介绍手动删除操作 ...
分类：
其他好文 时间：
2017-10-29 13:45:22
阅读次数：
124
一、前言从上周一直在调研找一款好用的kafka监控，我测试使用过的KafkaOffsetMonitor、Burrow、kafka-monitor、Kafka-Manager，他们各有优缺点，具体情况我这里就不展开描述了，大家可以到它们的git上去查看，并且它们基本上都是监控topic的写入和读取等等，没有提供对于整体集..
分类：
数据库 时间：
2017-08-22 21:58:12
阅读次数：
501
