开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

DataWorks中maxcomputer表的血缘是实时更新的么,为什么数据跑完之后,血缘连不上?

DataWorks中maxcomputer表的血缘是实时更新的么,为什么数据跑完之后,血缘连不上,是断的,调接口查也查不到完整链路的血缘信息?

展开
收起
真的很搞笑 2023-10-29 17:46:44 75 0
4 条回答
写回答
取消 提交回答
  • DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系,并能自动分析字段之间的异常关联关系。然而,血缘信息的更新可能并非实时的,特别是在任务配置上下游节点依赖前,您需要先确认当前节点的表血缘。因此,有可能在数据跑完之后,由于某些原因(如网络延迟、系统处理时间等),血缘信息还未更新,导致看上去血缘连不上或者查询不到完整链路的血缘信息。

    如果您发现血缘信息无法正常查看或查询,可以尝试重新运行任务并再次检查血缘信息。如果问题仍然存在,可能需要联系DataWorks的技术支持以获取进一步的帮助和解决方案。同时,请注意,对于更专业的数据治理和数据安全解决方案,您可能需要选择DataWorks的增值版本服务。

    2023-10-30 21:46:43
    赞同 展开评论 打赏
  • DataWorks提供了实时数据同步功能,可以将源端数据库中部分或全部表的数据变化实时同步至目标数据库中。这种全增量一体化同步方式,先进行全量数据迁移,然后再实时同步增量数据至目标端。

    对于MaxComputer表的血缘信息,DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系。但是,若数据跑完之后发现血缘连不上,可能的原因有多种。可能是因为同步任务还未完全执行完毕,或者是因为某些数据同步失败等。此时,可以通过查看任务运行情况和血缘关系图来定位问题。

    2023-10-30 15:34:23
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,表的血缘信息不是实时更新的,因此可能需要一定时间才能看到完整的血缘链路。如果血缘链路未更新,请等待一段时间再查看。如有必要,可以手动刷新页面,以获得最新的血缘链路信息。另外,检查任务的运行状态,确保所有任务都已经运行完成

    2023-10-30 14:44:38
    赞同 展开评论 打赏
  • 血缘是T+1离线的 且只有在DataWorks上产出的表数据才能拿到血缘,看下断掉的部分血缘的表 昨天在dataworks上有正常产出数据吗image.png
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-29 22:42:37
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关电子书

更多
被窝里的运维——DataWorks移动版公测-2020飞天大数据平台实战应用第一季 立即下载
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

相关实验场景

更多