开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink cdc中我这12个taskmanger,有4个老是不停地重启,什么原因?

c6497b3fed6b043110c7fccc1dfb0680.png
flink cdc中我这12个taskmanger,有4个老是不停地重启,看日志都是因为oom,但是配置都是一样的啊,为什么呢?

展开
收起
十一0204 2023-07-19 18:01:28 183 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    Flink CDC 是一个基于 Flink 的开源 CDC 工具,它可以帮助用户将各种数据库的增量数据进行实时同步。在 Flink CDC 中,TaskManager 是 Flink 的核心组件之一,它负责执行 Flink 任务的各个子任务。如果 TaskManager 经常重启,可能是由以下原因导致:
    内存不足
    TaskManager 的运行需要占用一定的内存资源,如果内存不足,可能会导致 TaskManager 重启。建议检查系统的内存使用情况,确保 TaskManager 有足够的内存资源。
    CPU 负载过高
    TaskManager 的运行需要占用一定的 CPU 资源,如果 CPU 负载过高,可能会导致 TaskManager 重启。建议检查系统的 CPU 使用情况,确保 TaskManager 有足够的 CPU 资源。
    网络连接问题
    TaskManager 之间需要进行网络通信,如果网络连接存在问题,可能会导致 TaskManager 重启。建议检查网络连接是否正常,以及 TaskManager 之间的网络通信是否稳定。

    2023-07-29 19:55:38
    赞同 展开评论 打赏
  • 意中人就是我呀!

    回数据倾斜。打散,重组,聚合,或者在sql层面的优化。
    此回答整理至钉群“Flink CDC 社区”。

    2023-07-19 18:57:42
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载