开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks在哪里可以看我所有节点(包含同步,推送,sql,python)等跑批情况?

DataWorks在哪里可以看我所有节点(包含同步,推送,sql,python)等跑批情况,必须要看得到调度时间,开始和结束日期,运行时间,和数据量条数,我在周期实例里面只能看到调度日期,信息太少了?

展开
收起
真的很搞笑 2024-07-17 08:18:30 44 0
1 条回答
写回答
取消 提交回答
  • 看能不能通过ListInstances、 GetInstanceLog 获取日志 再从日志中解析出需要的信息
    https://help.aliyun.com/zh/dataworks/api?spm=a2c4g.11186623.0.0.754457a7Yrp9JK#concept-2568666
    数据集成运维大屏可以看到数据集成类型的数据量和执行时间 不过这里的时间是调度提交到集成资源组 同步的开始和结束时间 看是否可以满足需求
    image.png

    image.png
    第二张图是所有类型的实例 不过像odps sql shell等 没有特地的记录数(一个odps sql可能存在多条sql shell等没有统一的统计方式) 有开始和结束的时间 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-07-18 08:54:09
    赞同 4 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载