开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大佬们Flink CDC ,addSink设置多个并发度的时候,会不会造成数据不一致啊?

大佬们Flink CDC ,addSink设置多个并发度的时候,会不会造成数据不一致啊?

展开
收起
雪哥哥 2022-12-04 22:10:48 288 0
1 条回答
写回答
取消 提交回答
    • EXACTLY ONCE 语义,Flink 通过一个 input buffer 将在对齐阶段收到的数据缓存起来,等对齐完成之后再进行处理。

    • AT LEAST ONCE 语义,无需缓存收集到的数据,会对后续直接处理,所以导致restore 时,数据可能会被多次处理。

    2022-12-09 07:46:57
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载