开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC的连接池参数配置不生效么?

Flink CDC的连接池参数配置不生效么?image.png
cdc 超过20个就跪了

展开
收起
真的很搞笑 2023-10-18 16:32:59 202 0
2 条回答
写回答
取消 提交回答
  • 相同问题,最后解决方式是增加了jobmanager的cpu和内存,问题得到解决

    2024-05-08 15:08:23
    赞同 展开评论 打赏
  • 在Flink CDC中,connection.pool.size参数用于配置连接池的大小,以管理与数据库的连接。然而,这个参数在Flink SQL中并不直接生效。这可能是因为Flink CDC使用了特定的Binlog Client来读取数据,当作业存在反压时,这些Binlog Client可能会因为反压的存在而无法继续读取数据。

    如果你发现CDC超过20个就会出问题,可能是由于连接池的大小设置得过小或者Binlog Client由于反压无法继续读取数据。你可以尝试增大connection.pool.size参数的值,以便提供更多的连接供Binlog Client使用。同时,也需要注意监控并处理作业的反压问题,以防止Binlog Client无法继续读取数据。

    2023-10-24 10:45:30
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载