tongchenkeji 发表于:2023-11-30 13:39:000次点击 已关注取消关注 关注 私信 DataWorks几个分支归并,应该是业务逻辑问题,但是归并节点不是有个“上游节点失败" 的功能么?[阿里云] 暂停朗读为您朗读 DataWorks几个分支归并,应该是业务逻辑问题,但是归并节点不是有个“上游节点失败” 的功能么?目前的情况是上游失败,直接终止了? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 阿里云# DataWorks3343# 大数据开发治理平台 DataWorks3946
小周sirAM 2023-12-3 11:41:03 1 在 DataWorks 中,归并节点(Join Node)是用于将多个分支的数据合并到一个节点中进行后续处理的。当需要确保所有上游节点都成功完成后才执行归并节点时,可以使用 “上游节点失败” 功能。 具体操作如下: 在归并节点的属性面板中,勾选 “上游节点失败” 选项。 这样设置后,只有当所有上游节点(即连接到归并节点输入的节点)都成功完成时,归并节点才会执行。如果任何一个上游节点失败或者处于未完成状态,归并节点将等待直到所有上游节点都成功。 此外,您还可以配置每个上游节点的最大失败数。当某个上游节点达到最大失败数时,归并节点将依旧等待其他上游节点的成功。 通过设置 “上游节点失败” 功能,可以确保业务逻辑上的所有上游节点成功后,再触发归并节点的执行。这对于需要基于多个分支的结果进行后续处理的场景非常有用。 请注意,这种设置仅适用于归并节点,并且只能在归并节点的属性面板中进行配置。其他类型的节点可能具有不同的错误处理和控制机制。
在 DataWorks 中,归并节点(Join Node)是用于将多个分支的数据合并到一个节点中进行后续处理的。当需要确保所有上游节点都成功完成后才执行归并节点时,可以使用 “上游节点失败” 功能。
具体操作如下:
通过设置 “上游节点失败” 功能,可以确保业务逻辑上的所有上游节点成功后,再触发归并节点的执行。这对于需要基于多个分支的结果进行后续处理的场景非常有用。
请注意,这种设置仅适用于归并节点,并且只能在归并节点的属性面板中进行配置。其他类型的节点可能具有不同的错误处理和控制机制。
在运维中心执行补数据可以 数据开发测试运行本身不走调度的逻辑,此回答整理自钉群“DataWorks交流群(答疑@机器人)”