开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks又出现这个问题了,一直等待资源怎么办?

DataWorks又出现这个问题了,一直等待资源,上午还是好的,等待五六分钟重启了还是这样,公共资源使用率还是0?image.png
image.png

展开
收起
真的很搞笑 2024-06-23 11:20:07 33 0
1 条回答
写回答
取消 提交回答
  • 为什么会出现等待资源?
    问题现象
    调度将任务下发到对应执行引擎上,此过程可能会出现以下等待资源问题:
    等待调度资源组。
    数据集成任务等待数据集成资源。
    计算任务等待引擎计算资源。
    产生原因
    资源组下可用资源是有限的,如果有任务长时间执行未释放资源必定会阻塞其他任务执行,关于任务下发机制,详情请参见:DataWorks资源组概述。

    解决措施
    您可进入运维中心 > 智能诊断,输入实例ID,对任务进行全链路分析,查看当前任务执行、排队情况,以及当前任务等待资源时,哪些任务占用了资源。快速定位长期占用资源,阻塞链路执行的任务。详情请参见智能诊断。
    image.png

    参考文档https://help.aliyun.com/zh/dataworks/support/nodes-that-are-waiting-for-resources?spm=a2c4g.11186623.0.i3#section-icz-p5s-2vp

    2024-06-24 09:12:10
    赞同 1 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多