dataworks中 独享集成资源组 不是负责数据同步的吗? 为什么同步任务还会一直wait? 这里的tunnel资源组又是什么
在DataWorks中,独享集成资源组的主要职责是保障数据集成同步任务数据的快速和稳定传输。这种资源组本质上是一组阿里云ECS实例,它们在数据集成任务运行时,需要确保资源组与数据源之间的网络连通性。
然而,即使有了独享集成资源组,同步任务仍然可能会wait。其中一种可能的原因是二级数据集成同步资源槽位不足,导致任务一直在等待同步资源。此外,若在配置MaxCompute数据源时配置了Tunnel Endpoint属性,那么在DataWorks上配置同步任务时,不支持指定独享传输资源组,实际同步任务运行时会使用指定地址对应的传输资源。
DataWorks中的独享集成资源组确实负责数据同步,但是如果您的数据同步任务一直处于等待状态,可能是由以下原因引起的:
独享集成资源组剩余的可用并发数 不够任务配置的并发数就会wait https://developer.aliyun.com/article/979768?spm=a2c6h.13262185.profile.9.7fcf6deaX3QRR3 可以参考看下,可以点下小问号看下,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks中的独享集成资源组主要负责分配计算资源,以便更好地执行数据同步任务。但是,如果同步任务仍然处于等待状态,则可能是由于以下原因之一:
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。