开发者社区> 问答> 正文

各位大佬有问题请教

flink 如果开启了checkpoint,是把消费kafka offset存放在在state,checkpointing到后端保存,同时会把offset回传到kafka,在kafka consumer_topic里保存 用户groupid的offset,正常情况下这是一个bakup 现在比如我开启了checkpoint,运行了一段时间后,我手动重启任务,这个时间没有用-s 去指定chkpoint/savepoint, 那么这种情况下,flink由于没获取state里的offset,它是重新按配置kafka的lastest/earliestj里去消费了? 还是会自动去找kafka里consumer_topic保存的topic消费?*来自志愿者整理的flink邮件归档

展开
收起
毛毛虫雨 2021-12-08 11:55:54 1110 0
1 条回答
写回答
取消 提交回答
  • 对的是我!

    不是savepoint恢复任务的话,flink-kafka-connector会按照配置的消费策略来确定 Kafka 分区的起始位置。*来自志愿者整理的flink邮件归档

    2021-12-08 17:02:50
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载