开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks job,表动态分区,最多一次能跑多少个分区,我看社区回答是512个分区?

dataworks job,表动态分区,最多一次能跑多少个分区,我看社区回答是512个分区?image.png

展开
收起
真的很搞笑 2023-07-01 17:34:48 52 0
3 条回答
写回答
取消 提交回答
  • 表分区最多只能有五万个,不清除就新增不了分区了,我就遇到了这种情况。

    2024-11-06 07:44:15
    赞同 展开评论 打赏
  • 北京阿里云ACE会长

    在DataWorks中,作业(Job)是一种任务调度和执行的方式,可以通过作业来执行数据集成、数据同步、数据处理等任务。对于表动态分区,DataWorks支持通过在SQL语句中使用动态分区变量来实现对多个分区的操作。

    关于最多能跑多少个分区,DataWorks中的作业引擎(Job Engine)会对作业进行限制,具体的限制取决于不同的参数设置和硬件资源。根据DataWorks官方文档的说明,作业引擎可以支持执行多达512个分区的作业。

    需要注意的是,由于作业引擎的限制和硬件资源的限制,实际上能够同时执行的分区数可能会受到一些限制,例如内存、CPU等资源的限制。因此,在实际运行作业时,需要根据具体情况进

    2023-07-31 23:03:30
    赞同 展开评论 打赏
  • 是maxcompute么 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-01 17:42:24
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多