开发者社区> 问答> 正文

hi 我遇到一个奇怪的问题 有一个10个分区的kafka topic 我的并发度设置成9 有8个分区的数据不消费 并发度设置成8有6个分区数据没法消费 并发度设置成10时 所有分区数据都消费不到,但是从日志上来看 每个task 都分配到了一个partition. 并发度设置成2或者5时 数据消费正常

转自钉钉群21789141:hi 我遇到一个奇怪的问题 有一个10个分区的kafka topic 我的并发度设置成9 有8个分区的数据不消费

并发度设置成8有6个分区数据没法消费   

并发度设置成10时 所有分区数据都消费不到,但是从日志上来看 每个task 都分配到了一个partition.
并发度设置成2或者5时 数据消费正常

展开
收起
赵慧@ApacheFlink中文社区 2018-10-18 13:47:45 4185 0
1 条回答
写回答
取消 提交回答
  • 据你所说,基本不会是Flink的问题。一个同事曾遇到过诡异的消费不到数据的问题,用kafka的命令查看消费者信息,结果发现有其他服务也用了相同的GroupId。以上,供参考。

    2019-07-17 23:09:14
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载