开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute 数据地图里面的血缘关系是有OSS这个的,API不返回是吗?

大数据计算MaxCompute API的GetMetaTableLineage获取对应下游,但是我发现返回的信息缺少了OSS,数据地图里面的血缘关系是有OSS这个的,API不返回是吗?866830fe01fd44e87db63c042a6311ea.png
b8ec12d3ab1a14589c2f45eaff3fee1f.png

展开
收起
真的很搞笑 2023-10-29 19:40:52 88 0
3 条回答
写回答
取消 提交回答
  • MaxCompute API的GetMetaTableLineage方法主要用于获取表的血缘关系,包括上游表和下游表。然而,这个方法并不包含所有的血缘信息。在某些情况下,它可能不会返回OSS相关信息。

    如果您需要在MaxCompute中获取完整的血缘信息,您可能需要使用其他的方法。例如,您可以使用DataWorks的数据地图功能来查看更详细的数据血缘关系。此外,您也可以考虑使用MaxCompute的内置工具,如"show create table"命令,来查看表的详细信息,这可能包括OSS的相关信息。

    虽然GetMetaTableLineage方法在某些情况下可能无法提供完整的信息,但它仍然是理解数据血缘关系的重要工具。如果您需要更详细的信息,您可以考虑使用其他方法,如DataWorks的数据地图功能。

    2023-10-30 12:17:21
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    是的,MaxCompute API GetMetaTableLineage 返回的血缘关系信息不包括 OSS 相关的信息。这是因为 MaxCompute 和 OSS 存储之间的数据传输是由 MaxCompute 的工作流引擎负责的,而这些工作流引擎的操作并未被记录在 MaxCompute 血缘关系中。
    如果您想要获取 MaxCompute 和 OSS 存储之间数据传输的详细信息,可以使用 MaxCompute 工作流引擎的日志功能进行跟踪。

    2023-10-30 10:35:52
    赞同 展开评论 打赏
  • 你点一数据地图血缘的这个表,看是不是显示表不在了。
    数据地图的血缘,如果表不存在了,这里显示还是正常的。 ,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-10-30 08:04:05
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载