tongchenkeji 发表于:2023-8-8 16:14:520次点击 已关注取消关注 关注 私信 DataWorks我现在集群的所有实例都没有任何运行,为什么我提交一个手动业务流程执行一个节点资源?[阿里云DataWorks] 暂停朗读为您朗读 DataWorks我现在集群的所有实例都没有任何运行,为什么我提交一个手动业务流程执行一个节点资源还需要等待呢? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 DataWorks# DataWorks3343# 大数据开发治理平台 DataWorks3946
算精通AM 2023-11-27 21:25:17 1 这种情况可能是DataWorks内部节点资源不足导致。可以按以下步骤排查: 首先登录DataWorks控制台,查看SERVICE ADMIN – 服务管理是否存在异常警告。 查看作业监控,查看具体的那个节点资源不足。 查看作业运行日志,是否显示资源申请失败。 查看作业配置,是否选择了足够的线程数 和执行内存。优化配置。 5.登录DataWorks管理控制台,查看各节点CPU利用率和内存利用率。确保还有剩余资源。 如果所有节点资源几乎被占用,可以升级您的DataWorks实例,增加节点数量。 可以暂停部分作业,释放部分资源。 提供更多信息分析: 作业ID节点资源类型:MR 、SPARK等部分作业运行日志作业配置信息
这种情况可能是DataWorks内部节点资源不足导致。可以按以下步骤排查:
首先登录DataWorks控制台,查看SERVICE ADMIN – 服务管理是否存在异常警告。
查看作业监控,查看具体的那个节点资源不足。
查看作业运行日志,是否显示资源申请失败。
查看作业配置,是否选择了足够的线程数 和执行内存。优化配置。
5.登录DataWorks管理控制台,查看各节点CPU利用率和内存利用率。确保还有剩余资源。
如果所有节点资源几乎被占用,可以升级您的DataWorks实例,增加节点数量。
可以暂停部分作业,释放部分资源。
提供更多信息分析:
作业ID
节点资源类型:MR 、SPARK等
部分作业运行日志
作业配置信息
任务配置并发数超过了 独享集成资源组可用并发数,此回答整理自钉群“DataWorks交流群(答疑@机器人)”