开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks数据质量配置的规则试跑结果跟晚上自动触发的结果不一致的问题有人遇见过吗?

DataWorks数据质量配置的规则试跑结果跟晚上自动触发的结果不一致的问题有人遇见过吗?

展开
收起
真的很搞笑 2023-10-24 16:15:19 52 0
3 条回答
写回答
取消 提交回答
  • DataWorks数据质量配置的规则试跑结果与晚上自动触发的结果不一致的问题,可能涉及到规则的设置、调度节点的配置以及时间因素等多方面原因。

    首先,你需要保证规则的正确性。在配置完质量规则后,建议先进行试跑来验证规则的准确性。此外,去噪管理功能也可以帮到你,它可以对一定时间内,因数据质量规则校验异常的数据不触发报警,且不阻塞任务运行。

    其次,确认你的调度节点是否正确配置。通过关联调度节点,可以定义质量规则触发的方式及时间。当调度节点执行后,将会触发该节点关联的数据质量校验规则自动运行。

    最后,请注意时间因素。如果规则设置正确,且调度节点无误,那么差异的出现可能是因为你试跑的时间和晚上自动触发的时间点所采集到的数据不同导致的。例如,源数据在这个时间段内有可能进行了更新或者修改。

    因此,如果你遇到数据质量配置的规则试跑结果跟晚上自动触发的结果不一致的问题,可以从以上几方面进行检查和调整。

    2023-10-29 18:48:09
    赞同 展开评论 打赏
  • 这个问题可能是由于多种原因导致的,包括但不限于:

    1. 数据质量问题:数据质量规则的结果可能会受到数据质量的影响。如果数据存在异常值或者缺失值,可能会导致规则的结果不一致。

    2. 规则配置问题:规则配置不正确或者规则参数配置不正确,可能会导致规则的结果不一致。

    3. 系统问题:DataWorks系统可能会出现一些问题,比如数据延迟、系统故障等,这些问题可能会导致规则的结果不一致。

    2023-10-25 11:04:25
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    根据您提供的信息,有人可能会遇到DataWorks数据质量配置的规则试跑结果和晚上自动触发的结果不一致的问题。这可能是由于以下原因:

    1. 数据质量问题:在试跑时,可能会使用到最新的数据,而晚上自动触发时,可能会使用到稍旧的数据。这可能会导致试跑结果和晚上自动触发的结果不一致。

    2. 规则配置问题:在试跑时,可能会使用到当前的规则配置,而晚上自动触发时,可能会使用到稍旧的规则配置。这可能会导致试跑结果和晚上自动触发的结果不一致。

    3. 系统问题:有时候,由于系统问题,试跑结果和晚上自动触发的结果可能会不一致。在这种情况下,您可以尝试重新运行试跑和自动触发的规则,看看是否可以得到一致的结果。

    2023-10-24 22:13:19
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多