开发者社区> 问答> 正文

【flink-connector-kafka】是否支持Subscribe模式呢?

     Flink支持Subscribe模式吗?用的connector版本是flink-connector-kafka-0.11_2.11,0.11x;      因为业务需要,我想要优雅下线掉TopicB,即不中断事件流;执行结果发现当Flink服务和A服务指定同一个group.id,同时消费TopicA时,kafka偏移量提交失败(开启了检查点);*来自志愿者整理的FLINK邮件归档

展开
收起
玛丽莲梦嘉 2021-12-03 18:16:24 1064 0
1 条回答
写回答
取消 提交回答
  • 其实本质上是手速和kafka balance切换速度的PK。 有一点要考虑的是,如果作业本身有状态,也就是使用了除kafka partition、offset外的其他状态,那么依赖kafka balance的方式(或类似方式)会导致两个作业的结果都不正确*来自志愿者整理的FLINK邮件归档

    2021-12-03 18:47:36
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载