开发者社区 > 大数据与机器学习 > 正文

Flink CDC 新加的表先跑全量,跑完后原job重置到全量前的时间offset全新启动呢?

Flink CDC 新加的表先跑全量,跑完后原job重置到全量前的时间offset全新启动呢?image.png 我们用的是hologress的,pgsql的不知道行不行

展开
收起
真的很搞笑 2023-05-01 17:50:20 82 0
1 条回答
写回答
取消 提交回答
  • pgsql-cdc没这个点位启动吧,先停止原job,过一会再另开job执行新表全量,全量完成后,再启动原job,这时全量数据是晚于原job的offset的;但是这里有个问题是因为原job新加了表,会不会导致checkpoint不一致而无法启动作业,一样的,只要你启动任务从savepoint能成功启动不报错那就行,此回答整理自钉群“Flink CDC 社区”

    2023-05-02 08:01:04
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 覃立辉 立即下载
    Flink CDC Meetup PPT - 孙家宝 立即下载
    Flink CDC Meetup PPT - 徐榜江 立即下载