DataWorks我只有一个补数任务为什么会报这个呢,平时都好好的,今天就出现这个问题了是什么原因导致的 ?
补数据实例过多或并行数过高可能导致周期调度的资源紧张,请您根据需求合理配置。
https://help.aliyun.com/zh/dataworks/user-guide/backfill-data-for-an-auto-triggered-node-and-view-data-backfill-instances-of-the-node?spm=a2c4g.11186623.0.i12
注意事项
当补一个区间的数据时,在启动补数据的第一天存在一个运行失败的实例,则当天的补数据实例会被置为失败状态,第二天的实例也不会启动运行(只有当天的全部任务实例都成功,第二天的任务实例才会开始运行)。
小时或分钟任务补某一天数据时,当天所有实例是否并发执行与任务是否设置自依赖有关。
如果周期实例和补数据实例均启动运行,为了保证周期实例的正常运行,您需要终止补数据实例的运行。
补数据实例过多或并行数过高可能导致周期调度的资源紧张,请您根据需求合理配置。
为避免补数据实例占用过多的资源而影响周期实例的运行,平台对补数据实例制定以下规则:
如果补数据选择业务日期为昨天(T-1),即补当天数据时,补数据任务优先级由任务所在基线优先级决定。
如果补数据选择业务日期为历史业务日期(T-2)时,补数据任务将按照以下规则对任务进行降级处理:
7级、8级任务优先级降为3级。
5级、3级任务优先级降为2级。
1级任务优先级保持不变。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。