在消费kafka的消息时,数据的变动是最重要的,要确保没有数据丢失,所以kafka的监控很重要.kafka的监控工具主流的有三种 1、Kafka Web Conslole 2、Kafka Manager 3、KafkaOffsetMonitor 4、kafka Eagle 以下主要介绍kafka E ...
分类:
其他好文 时间:
2019-11-29 21:06:40
阅读次数:
144
一、前言 为什么要设计kafka告警方案?现成的监控项目百度一下一大堆,KafkaOffsetMonitor、KafkaManager、 Burrow等,具体参考:kafka的消息挤压监控。由于本小组的项目使用的kafka集群并没有被公司的kafka-manager管理,所以只能自己简单做一个告警。 ...
分类:
其他好文 时间:
2018-12-04 17:12:53
阅读次数:
124
windows下KafkaOffsetMonitor下载及安装 ...
就不给资源了,github上去找,注意去掉请求的外网资源,如果找不到,可以联系我有现成的资源 先说踩到的坑,大家可能对这个更感兴趣,希望对大家有帮助!!! 1.chrome浏览器:我是直接找到的不带有外网资源的代码,还有对jquery和一些静态资源的请求,我仔细检查了源代码,并没有对这些资源做出请求 ...
分类:
其他好文 时间:
2017-11-13 16:49:01
阅读次数:
985
一、前言从上周一直在调研找一款好用的kafka监控,我测试使用过的KafkaOffsetMonitor、Burrow、kafka-monitor、Kafka-Manager,他们各有优缺点,具体情况我这里就不展开描述了,大家可以到它们的git上去查看,并且它们基本上都是监控topic的写入和读取等等,没有提供对于整体集..
分类:
数据库 时间:
2017-08-22 21:58:12
阅读次数:
501
1. 下载 wget https://github.com/quantifind/KafkaOffsetMonitor/releases/download/v0.2.1/KafkaOffsetMonitor-assembly-0.2.1.jar 2. 启动脚本 3. 停止脚本 访问:http://1 ...
分类:
其他好文 时间:
2017-08-15 12:39:55
阅读次数:
159
kafkaOffsetMonitor 下载地址: http://pan.baidu.com/s/1gf9rmrp 执行脚本: java -cp KafkaOffsetMonitor-assembly-0.2.0.jar \ com.quantifind.kafka.offsetapp.OffsetG ...
分类:
其他好文 时间:
2017-06-30 12:18:04
阅读次数:
134
一、zookeeperZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。ZooKeeper的目标就是封装好..
分类:
其他好文 时间:
2017-04-22 14:49:18
阅读次数:
676
业务需求描述:kafka的监控在grfana的展示监控方案:kafkaoffsetmonitor+graphite+grafanakafka信息描述:kafka的0.9.x版本位移offset信息不在保存在zookeeper上面了,所有kafkaoffsetmonitor监控在kafka0.9.X之后不能再抓取offset的监控信息。问题描述:在grafana做图形展示的时..
分类:
Web程序 时间:
2017-04-06 17:10:46
阅读次数:
572
因为公司打算监控kafka队列信息,但是又不想直接安装KafkaOffsetMonitor这个工具,希望能够将kafka的监控信息内嵌到grafana上面,在这个项目的github上面无意中看到这个个工具可以当作一个插件使用,可以直接内嵌到graphite当中,所有前提是需要搭建一个graphite,所以才有了这..
分类:
其他好文 时间:
2017-04-01 14:05:51
阅读次数:
276