开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

问一个现象的解决方法,flinksql从kafka读数据写入es,当任务运行一段时间,es突然断掉?

问一个现象的解决方法,flinksql从kafka读数据写入es,当任务运行一段时间,es突然断掉一个节点,恢复后,该flink任务会卡死,即写入es的那个subtask会变成100%busy这个如何解决?

展开
收起
真的很搞笑 2023-08-01 12:54:33 179 0
1 条回答
写回答
取消 提交回答
  • 这种现象的原因,可能是 Es 集群发生了故障,导致连接断掉。

    解决方法如下:

    检查 Es 集群的状态。
    如果 Es 集群发生了故障,则需要修复 Es 集群。
    如果 Es 集群没有发生故障,则需要检查 FlinkSQL 连接 Es 的配置是否正确。
    如果 Es 连接配置正确,则需要检查 FlinkSQL 程序中是否有错误。
    如果无法解决问题,建议您联系 Es 官方支持。

    2023-09-27 16:13:15
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载