码迷,mamicode.com
首页 > 其他好文 > 详细

kafka 关于offset的理解--关于__consumer_offsets分析

时间:2020-04-27 00:07:18      阅读:369      评论:0      收藏:0      [点我收藏+]

标签:alt   mic   offer   设置   配置   ups   str   ORC   tor   

通过groupname 获取groupid

技术图片

 

 

通过命令查
./bin/kafka-consumer-groups.sh --bootstrap-server ip:9092 --describe --group consumer2

技术图片

 

 

保存到 kafka配置的~/data文件夹(现有集群为3/分析得出就是0,3,6……),做kafka集群后offsets会分布在每个集群上,可以认为是一种特俗的topic
通过hash并%50得出对应的__consumer_offsets_num
如果某一台机器down了/并且很不幸/那consumer 获取不到相关的offset,可以通过设置offsets.topic.replication.factor=3来保存offer的topic也有副本 ./bin/kafka-topics.sh -describe --bootstrap-server ip:9092 --topic __consumer_offsets

 技术图片

 

 参考https://www.orchome.com/805 里面评论还挺有意思/

kafka 关于offset的理解--关于__consumer_offsets分析

标签:alt   mic   offer   设置   配置   ups   str   ORC   tor   

原文地址:https://www.cnblogs.com/imaye/p/12783550.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!