开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

请问flinkcdc下cdc 可以对接 云上的 polardb-x 吗?

问题1:请问flinkcdc下cdc 可以对接 云上的 polardb-x 吗?
问题2: 直接对接 rds 是吧?昨天对接 polardb-x 的时候 老是解析 分库分表字段失败。

展开
收起
十一0204 2023-07-19 18:38:19 145 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    Flink CDC 可以对接云上的 PolarDB-X,只要满足以下两个条件:
    PolarDB-X 支持 MySQL 协议。Flink CDC 支持的数据库类型包括 MySQL、PostgreSQL 和 Oracle。由于 PolarDB-X 支持 MySQL 协议,因此可以使用 Flink CDC 对其进行数据抽取。
    PolarDB-X 的 binlog 格式为 ROW 格式。Flink CDC 可以通过读取数据库的 binlog 实现数据抽取,但需要确保 binlog 格式为 ROW 格式。PolarDB-X 默认使用 ROW 格式,因此不需要进行额外的配置。
    在使用 Flink CDC 对接 PolarDB-X 时,可以参考 Flink 官方文档中提供的示例代码和配置文件,根据具体的需求进行配置和调整。例如,可以使用 Flink SQL API 或者 Flink DataStream API 来编写 CDC 抽取任务,同时需要配置正确的连接信息和表信息,以实现数据的抽取和处理。
    需要注意的是,由于 PolarDB-X 是云上的分布式数

    2023-07-29 19:28:12
    赞同 展开评论 打赏
  • 意中人就是我呀!

    "回答1:18a76870a2e2dcbe66cfcbd352051bac.png
    回答2:可以的,polardb-x 还需要分库分表这事有点不太合理了。polardb-x在业务上可以不分库分表,单表数据量基本可忽略,和数据同步没关系。此回答整理至钉群“Flink CDC 社区”。"

    2023-07-19 19:10:10
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
云栖大会:开源 PolarDB 架构演进、关键技术与社区建设 立即下载
2023云栖大会:和客户一起玩转PolarDB新特性 立即下载
2023云栖大会:PolarDB for AI 立即下载