开发者社区 > 大数据与机器学习 > 正文

你好,各位大佬们,我有个Flink CDC问题,我使用flink-mysql-cdc的在一个job?

你好,各位大佬们,我有个Flink CDC问题,我使用flink-mysql-cdc的MySQLSource在一个job同步了多张表,比如a,b和c,但是现在c需要进行整表重新同步,表a和表b继续进行原来的同步任务,这种有没有比较简单的方法实现,目前的方式是新开一个job单独同步表c,然后表c同步差不多了,再添加到原job,并且使用timestamp模式作为startupMode调整时间戳后重启,但是比较麻烦

展开
收起
真的很搞笑 2023-06-11 16:48:15 60 0
1 条回答
写回答
取消 提交回答
  • 试试整库同步,目前有kafka和mysql和hologres和starrocks,你去看看整库同步的相关介绍,比如dinky的开源介绍,他们cdas到了那些,你先通过sql-client进行selec,你先通过sql-client进行select 出来,如果sql-client进行select 出来,,那就是可以拿到增量数据,至于结果表没有写进去,那就是自己排查下就行了,此回答整理自钉群“Flink CDC 社区”

    2023-07-20 15:49:33
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    搭建电商项目架构连接MySQL 立即下载
    搭建4层电商项目架构,实战连接MySQL 立即下载
    PolarDB MySQL引擎重磅功能及产品能力盛大发布 立即下载

    相关镜像