开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks今天数据同步一直都在等待中?

DataWorks今天数据同步一直都在等待中?image.png
2023-10-18 18:58:56 : The Job[973545660] will run in PhysicsPipeline [basecommon_S_res_group_492978986489922_1680839889820] with requestId [4b7ac395-d947-4564-8ece-31c643075f1f]
2023-10-18 18:58:56 : Detail log url: https://di-cn-hangzhou.data.aliyun.com/web/di/instanceLog?id=973545660&resourceGroup=S_res_group_492978986489922_1680839889820&requestId=4b7ac395-d947-4564-8ece-31c643075f1f&projectId=62333
2023-10-18 18:58:56 : State: 1(SUBMIT) | Total: 0R 0B | Speed: 0R/s 0B/s | Stage: 0.0%

2023-10-18 18:59:11 : State: 2(WAIT) | Total: 0R 0B | Speed: 0R/s 0B/s | Stage: 0.0%

2023-10-18 18:59:26 : State: 2(WAIT) | Total: 0R 0B | Speed: 0R/s 0B/s | Stage: 0.0%

2023-10-18 18:59:42 : State: 2(WAIT) | Total: 0R 0B | Speed: 0R/s 0B/s | Stage: 0.0%

2023-10-18 18:59:57 : State: 2(WAIT) | Total: 0R 0B | Speed: 0R/s 0B/s | Stage: 0.0%

展开
收起
真的很搞笑 2023-10-24 15:40:26 112 0
3 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    如果DataWorks的数据同步一直处于等待中,可能有以下原因:

    1. 数据源的可用性问题:可能是由于数据源的可用性问题导致数据同步无法进行。你可以检查数据源的连接状态,以及数据源是否正在运行。
    2. 数据同步任务的调度问题:可能是由于数据同步任务的调度问题导致数据同步无法进行。你可以检查数据同步任务的调度设置,以及是否按照预期的调度周期进行调度。
    3. 数据源的处理能力问题:可能是由于数据源的处理能力问题导致数据同步无法进行。你可以检查数据源的处理能力,以及是否能够满足数据同步的需求。
    2023-10-24 23:01:47
    赞同 展开评论 打赏
  • 打印wait应该是在等待数据集成资源,现在是否跑成功了image.png
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-24 22:32:11
    赞同 展开评论 打赏
  • 月移花影,暗香浮动

    数据同步等待中可能是由于多种因素引起的,包括同步任务本身配置、数据库性能和网络状况等。首先,您需要确认任务的并发配置是否合理,如果并发数过高或过低都可能影响同步速度。此外,对于独享数据集成资源组,如果资源不足也可能导致任务等待,此时可以考虑扩容以释放更多资源。

    另外,您还可以查看具体的错误信息或日志,以便更准确地定位问题所在。例如,如果同步程序在等待数据库返回SQL查询结果,可能的原因包括但不限于where条件没有使用索引导致的全表扫描。在这种情况下,优化SQL查询,如为where条件添加合适的索引,可以提高查询性能并加速同步。

    如果您使用的是一键实时同步方案,建议检查离线同步任务和实时同步任务的相关属性设置,确保它们都符合业务需求。

    总体而言,数据同步的性能问题通常需要综合多方因素进行调优。除了上述提到的方法外,也可以参考官方文档和社区讨论来获取更多关于数据同步调优的信息和建议。

    2023-10-24 17:27:56
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多