开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC读取oracle,redolog加载速度是不是就代表了进程读取进度?

Flink CDC读取oracle,redolog加载速度是不是就代表了进程读取进度?

展开
收起
真的很搞笑 2023-08-29 11:55:39 94 0
1 条回答
写回答
取消 提交回答
  • 是的,redolog 加载速度是代表了 Flink CDC 读取进程的读取进度。

    Flink CDC 读取 Oracle 数据库的流程如下:

    Flink CDC 会创建一个 redolog 拉取作业,该作业会从 redolog 中读取数据。
    Flink CDC 会创建一个 redolog 解析作业,该作业会将 redolog 中的数据解析成 Flink 的 DataStream。
    Flink CDC 会创建一个消费作业,该作业会将 Flink 的 DataStream 写入目标系统。
    redolog 加载速度是指 Flink CDC 在第一步读取 redolog 的速度。redolog 加载速度越快,Flink CDC 就会越早读取到新的数据。

    Flink CDC 读取进度是指 Flink CDC 在第三步写入目标系统的速度。Flink CDC 写入目标系统的速度取决于目标系统的处理能力。

    总的来说,redolog 加载速度是代表了 Flink CDC 读取进程的读取进度。但是,Flink CDC 的读取进度还取决于目标系统的处理能力。

    2023-09-20 10:36:54
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    PostgresChina2018_樊文凯_ORACLE数据库和应用异构迁移最佳实践 立即下载
    PostgresChina2018_王帅_从Oracle到PostgreSQL的数据迁移 立即下载
    Oracle云上最佳实践 立即下载

    相关镜像