在Dataphin 调度运维时,哪些能力可以帮助用户及时发现异常?
• 核心能力 1:自动推算需要纳入基线监控范围的任务
添加需要保障的任务或字段后,系统将基于依赖关系自动推算需要纳入监控范围的上游节点,这样一来,即使更新了任务依赖关系,也无需更新基线配置,大大降低了人工操作成本;同时也提升了监控准确性,避免因为配置不同步而导致的监控缺失。
• 核心能力 2:关联路径与关键实例识别
基线上需要保障的任务,其依赖关系可能错综复杂,Dataphin 提供甘特图功能帮助您快速定位阻塞基线上数据产出的关键路径与关键实例,其中影响基线任务产出的多条路径中,耗时最长的路径为基线关键路径。
• 核心能力 3:自动推算预计产出时间并触发相应告警
周期运行过程中,系统将根据基线链路上每个节点最近 7 天的历史运行概况,推算保障节点的预计运行完成时间。如果推算出的时间晚于配置的预警及承诺时间,则会发送基线告警,给开发人员和业务人员对应的通知。
此外,Dataphin 也支持针对单个任务的监控,以离线监控为例,支持以下几种监控场景:完成、出错、运行超时、未完成。
以上内容摘自《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》电子书,点击https://developer.aliyun.com/ebook/download/7832可下载完整版。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。