DataWorks数据质量如何进行关联调度?
DataWorks数据质量如何进行关联调度?[阿里云DataWorks]
「点点赞赏,手留余香」
还没有人赞赏,快来当第一个赞赏的人吧!
tongchenkeji @ 同尘科技 2023/11/20
DataWorks数据质量如何进行关联调度?[阿里云DataWorks]
DataWorks数据质量如何进行关联调度?
0 收藏
扫描二维码继续阅读
false
给undefined打赏
2元
5元
10元
20元
50元
¥0
您的当前余额:¥0
通过调度任务列表查看。https://help.aliyun.com/zh/dataworks/user-guide/manage-unexpected-data?spm=a2c4g.11186623.0.i104
当数据质量监控规则关联调度节点后,您可进入调度节点的运行详情页面,在任务执行 > DQC面板,单击目标规则操作列的查看详情,查看问题数据采集过程。详情请参见:智能诊断。
DataWorks数据质量管理功能支持通过关联调度实现自动化的数据质量检测。以下是进行关联调度的具体步骤:
在DataWorks中,数据质量的关联调度是一种将分区表达式和节点任务进行关联的功能,支持与多个节点任务进行关联。当分区表达式下的任务运行时,与该表达式绑定的数据质量监控规则会自动触发检测。
具体来说,您可以在数据质量规则配置页面点击”关联调度”按钮,进入关联调度配置页面。在这个页面的输入框中,输入您需要关联的任务节点名称,然后点击”添加”按钮。通过这种方式,您可以将数据质量规则与特定任务节点关联起来。
值得注意的是,当与表关联的调度节点运行(执行节点代码逻辑)完成后,DataWorks平台将会根据数据质量规则强弱和数据质量规则校验结果决定任务是否由于质量规则校验失败退出,并阻塞下游任务的执行。这样,您可以确保数据质量的监控和控制,防止质量问题的数据影响业务决策。