开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks正确的调度关系只能次日产生了是吗?

DataWorks正确的调度关系只能次日产生了是吗?无法终止运行image.png

展开
收起
真的很搞笑 2024-03-31 19:31:08 45 0
3 条回答
写回答
取消 提交回答
  • 对的 实时转实例主要会影响未到定时时间的实例,未运行的不支持操作 上游有失败或冻结的 它就不会再运行了 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-04-01 17:17:42
    赞同 展开评论 打赏
  • DataWorks次日产生,也可以立即生成调度实例**。

    DataWorks作为阿里云提供的大数据开发治理平台,拥有强大的调度管理功能。对于周期调度节点,DataWorks支持两种实例生成方式:

    • T+1次日生成:这种方式指的是任务发布后不会立即生成实例,而是在次日生成。例如,如果今天发布了一个任务并选择了T+1选项,那么今天不会生成实例,而是在明天的特定时间(如凌晨23:30)生成明天的调度实例。
    • 发布后即时生成:这种方式则是指任务一旦发布至生产环境,系统会立即自动生成调度实例,不要等到第二天。

    此外,DataWorks还支持根据DAG(有向无环图)关系进行准确和准时的任务运行,无论是分钟、时、天等不同级别的调度需求,DataWorks都能满足。

    因此,如果您需要终止运行某个任务,可以通过DataWorks的操作界面找到相应的任务实例并进行终止操作。具体的操作方法可能需要根据任务的实际情况和DataWorks的具体版本来确定。如果遇到无法终止运行的情况,建议查看是否有相关的权限限制或操作步骤遗漏,或者联系DataWorks的技术支持获取帮助。

    2024-03-31 20:48:41
    赞同 展开评论 打赏
  • 在DataWorks中,调度关系的生成并不仅限于次日产生。DataWorks支持两种实例生成方式:T+1次日生成和发布后即时生成

    • T+1次日生成:这种方式下,调度任务会在发布至生产环境后的第二天开始自动调度运行。这意味着,如果今天发布了一个调度任务,那么该任务的第一次运行将会在明天进行。
    • 发布后即时生成:选择这种实例生成方式,调度任务会在发布至生产环境后立即自动调度运行。这样可以满足那些需要立即执行的调度任务的需求。

    此外,在配置调度任务时,还需要注意以下几点:

    • 调度类型:DataWorks支持多种调度周期配置,包括分钟、小时、天、周和月等,以满足不同的业务需求。
    • 依赖关系:调度任务可能会根据DAG(有向无环图)关系来准确、准时运行。这要求在创建节点时正确配置依赖关系,以确保任务能够按照预期的顺序执行。
    • 离线同步节点:对于离线同步节点,通常采用T+1次日生成的方式来生成实例,并且需要正确配置依赖关系。
    • ODPS节点:在使用ODPS节点查询非周期性生成数据的表时,可能需要手动处理自动解析出来的依赖上游节点,以避免错误的依赖关系。

    总的来说,DataWorks提供了灵活的调度选项,可以根据实际业务需求选择合适的实例生成方式和调度周期,以实现高效的任务管理和运行。

    2024-03-31 20:41:24
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多