开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks提交时提示血缘关系不对怎么办?

DataWorks提交时提示血缘关系不对怎么办?image.png

展开
收起
真的很搞笑 2023-10-29 21:01:49 92 0
4 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    在DataWorks中,如果提交作业时提示血缘关系不正确,通常是由于数据节点之间的血缘关系配置有误或存在缺失导致的。检查数据节点的输入输出:确保每个节点的输入都来自于正确的上游节点,且输出连接到了正确的下游节点。检查每个节点的输入和输出配置,并确保它们与实际的数据流向一致。检查字段映射关系:如果数据节点之间存在字段映射,确保字段映射关系正确配置。检查每个节点的字段映射配置,包括字段名称、类型、顺序等,以确保输入输出字段能够正确匹配。

    2023-10-30 11:18:00
    赞同 展开评论 打赏
  • 如果在DataWorks提交任务时提示血缘关系不对,可能是因为以下原因:

    1. 数据集成任务中使用了错误的输出字段作为输入字段。
    2. 数据集成任务中使用了错误的输入字段作为输出字段。
    3. 数据集成任务中使用了错误的输出字段作为输出字段。

    解决方法如下:

    1. 检查数据集成任务的输入和输出字段,确保它们正确匹配。
    2. 检查数据集成任务的血缘关系配置,确保它们正确配置。
    3. 如果可能,尝试重新运行数据集成任务,看看是否可以解决问题。
    2023-10-30 08:55:05
    赞同 展开评论 打赏
  • 检查节点的调度依赖与节点代码中的数据血缘关系是否一致。如果出现不一致的提示,需要根据实际情况查看是否需要修改调度依赖配置。
    确认数据源、数据目标等是否有误。比如,确认表名、列名是否正确,确认数据类型是否正确等。

    血缘关系为您展示当前节点和其它节点的关系,展示依赖关系图和内部血缘图两部分。https://help.aliyun.com/zh/dataworks/user-guide/lineage?spm=a2c4g.11186623.0.i73

    2023-10-30 08:55:00
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    如果在DataWorks中提交时提示血缘关系不对,您可以按以下步骤进行操作:

    1. 验证数据源与表之间的关联性:首先需要验证数据源与表之间的关联性是否正确。可以尝试重新配置数据源和表之间的关联性,以确保正确性。
    2. 检查字段映射:如果数据源和表之间的关联性正确,那么还需要检查字段映射是否正确。如果字段映射出现问题,那么血缘关系也会受到影响。
    3. 检查数据源配置:最后,也需要检查数据源的配置是否正确。例如,检查表名是否正确,是否指定了正确的分区,是否存在访问权限等问题。

    如果以上操作都无法解决问题,可以考虑以下方案:

    1. 创建新表:可以尝试重新创建一张新表,并将正确的血缘关系指定给新表,以解决血缘关系问题。
    2. 清除缓存:如果数据源中的数据发生变化,那么可能需要清除DataWorks的缓存,以确保数据的准确性。
    2023-10-29 22:27:01
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多