开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC这种只是争对kafka的,如果是针对flink的多并行度呢,是不是也是一致的呢?

Flink CDC这种只是争对kafka的,如果是针对flink的多并行度呢,是不是也是一致的呢!比方说我一个source并行度为4,那么是不是针对单条记录的增删改就会在一个并行度里呢,如果是这样的话,那么如果我加上schemaChange后,是不是其他几个并行线程的数据就会先于schemaChange事件到达,那这种该咋个处理呢?

展开
收起
真的很搞笑 2023-09-20 13:10:53 86 0
1 条回答
写回答
取消 提交回答
  • 一样的情况,kafka按照主键hash分区,flink 按照主键keyby,schemaChange 暂时未使用过, 最好全部测试下, 这些schema变更信息, 最后都是拼接的修改数据库SQL语句.,此回答整理自钉群“Flink CDC 社区”

    2023-09-20 15:40:25
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载