开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

请问:Flink cdc sqlserver 获取savepoint后日志顺序错乱是什么原因?

启动监控时,会获取Checkpoint后的变更记录, 但是我发现,对于一条记录的多次变更获取过来的顺序是乱的。
我对country表中一条记录的name字段从A->B->C->D,每次改变都有保存,对应的cdc表中也有记录。但是在启用flink cdc 时,打印抽取记录的顺序并不是想象中的:
{"before":{"status":"A"},"after":{"status":"B"}}
{"before":{"status":"B"},"after":{"status":"C"}}
{"before":{"status":"C"},"after":{"status":"D"}}.

实际获取到的数据的顺序时随机的。
下面是截图
country_cdc日志表记录
CDC01.png

下面的截图是启动flink cdc 时输出:
CHOUQU01.png
CHOUQU02.png

如何才能保证这部分数据的抽取也是按顺序的? 否则乱的话到更新到其它表中也是错误的。
数据库版本 SQLServer 2016 标准版
flink.version =1.13.5
flink-connector-sqlserver-cdc 版本 2.2.1

展开
收起
鲁班学艺 2023-10-31 16:10:48 84 1
0 条回答
写回答
取消 提交回答

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    PostgresChina2018_赖思超_PostgreSQL10_hash索引的WAL日志修改版final 立即下载
    Kubernetes下日志实时采集、存储与计算实践 立即下载
    日志数据采集与分析对接 立即下载