Kafka常用工具

   日期:2024-12-26    作者:zjyjmrzyx 移动:http://oml01z.riyuangf.com/mobile/quote/49151.html

1. 创建topic

Kafka常用工具

 

2. 查询topic最大及最小offset  (time: -2表示最小,-1表示最大)

 

 3.  手动测试消费消息

 

4. 查询__consumer_offset 的数据, config文件的值为:exclude.internal.topics=false

 


5. 查询__consumer_offset某个分区的数据

 

6. __consumer_offset保存new consumer的offset, 如果数据仍然保存在zk,使用如下命令查看消息的offset

 


还有重新分布分区,查看log等工具

kafka-reassign-partitions.sh

kafka-replay-log-producer.sh 

0.11 :


bin/kafka-console-consumer.sh --topic __consumer_offsets --zookeeper localhost:2181 --formatter "kafka.coordinator.group.GroupMetadataManager$OffsetsMessageFormatter" --consumer.config config/consumer.properties --from-beginning

目前我碰到的问题是,new consumer查询为空,实际上我使用了new consumer去获取数据,而且查看__consumer_offset也的确有数据,但是查询不出来到底有多少个new consumer group,  另外有些用老的consumer来消费的,数据保存在ZK,名字格式为console-consumer-xxxxxx, 


特别提示:本信息由相关用户自行提供,真实性未证实,仅供参考。请谨慎采用,风险自负。


举报收藏 0评论 0
0相关评论
相关最新动态
推荐最新动态
点击排行
{
网站首页  |  关于我们  |  联系方式  |  使用协议  |  隐私政策  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报  |  鄂ICP备2020018471号