tongchenkeji 发表于:2022-9-5 18:30:100次点击 已关注取消关注 关注 私信 dataworks中数据源配置备库,并且数据集成使用独享资源组,为什么还会走主库?[阿里云MaxCompute] 暂停朗读为您朗读 dataworks中数据源配置备库,并且数据集成使用独享资源组,为什么还会走主库? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 MaxCompute# DataWorks3343# 云原生大数据计算服务 MaxCompute3255# 大数据开发治理平台 DataWorks3946# 数据集成 Data Integration293
飞云觅宙AM 2023-11-27 18:28:58 2 DataWorks支持公共资源组、独享资源组和自定义资源组。各类资源组属性说明与选择指导详见下面链接: https://help.aliyun.com/document_detail/158096.html?share_token=c5bce2ca-b40a-422b-9219-5b3bf5a45ce7&tt_from=copy_link&utm_source=copy_link&utm_medium=toutiao_android&utm_campaign=client_share – DataWorks资源组概述-阿里云 – 今日头条 目前DataWorks的独享资源组提供了2种:独享调度资源组和独享数据集成资源组。 独享目前不能支持跨租户节点、机器学习任务;其余支持 购买独享资源组的时候,务必要注意购买与自己VPC在同一个可用区 切换任务资源组的时候: 注意每种任务类型都需要测试验证:网络是否已经打通。 特别特别注意: 1、在运维中心任务修改资源组周期任务是需要第二天才会生效,及时生效可以通过测试或者补数据运行即可; 2、__一定要先单个测试在批量修改,__一定要先单个测试在批量修改,__一定要先单个测试在批量修改 3、如果有网络打通的,优先将网络打通,可以在测试的时候验证出来的; 特别特别注意:可用区需要跟您的VPC在一个可用区:(就是你的任务是否需要访问VPC地址,比如访问ads、adb等,就需要跟次VPC在一个可用区)如果没有可用,提工单! 特别特别注意:虚节点、工作流、机器学习等任务类型不要选择上,因为这些不支持资源组修改;具体详见下面链接: https://blog.csdn.net/yunqiinsight/article/details/104998980?share_token=66217ad5-10b9-4b54-8437-af5506d39f5d&tt_from=copy_link&utm_source=copy_link&utm_medium=toutiao_android&utm_campaign=client_share – 任务不再等待!玩转DataWorks资源组_阿里云云栖号的博… – 今日头条
穿过生命散发芬芳AM 2023-11-27 18:28:58 3 可以检查下如下操作,是否配置的备库。 独享数据集成资源组创建成功后,您需要在配置数据集成任务时修改任务运行资源。 1、在资源组列表 > 独享资源组页面,单击相应资源后的修改归属工作空间,绑定独享数据集成资源组归属的工作空间。 2、在数据集成任务的编辑页面,通过调度运行及界面测试,选择运行时执行数据集成离线同步任务的资源组: – 单击左上角的全部图标,选择全部产品 > 数据开发 > DataStudio(数据开发),并切换至修改的归属工作空间。 – 在数据开发面板,双击打开相应节点的编辑页面。 – 单击右侧的数据集成资源组配置。 – 在数据集成资源组配置对话框中,选择相应的方案和资源组。
既然是配置了备库,那么主库有没有异常呢?假如还没有到切换主库的级别,那肯定不会走的呀,所以还是要确认配置的。
DataWorks支持公共资源组、独享资源组和自定义资源组。各类资源组属性说明与选择指导详见下面链接:
https://help.aliyun.com/document_detail/158096.html?share_token=c5bce2ca-b40a-422b-9219-5b3bf5a45ce7&tt_from=copy_link&utm_source=copy_link&utm_medium=toutiao_android&utm_campaign=client_share – DataWorks资源组概述-阿里云 – 今日头条
目前DataWorks的独享资源组提供了2种:独享调度资源组和独享数据集成资源组。
独享目前不能支持跨租户节点、机器学习任务;其余支持 购买独享资源组的时候,务必要注意购买与自己VPC在同一个可用区 切换任务资源组的时候: 注意每种任务类型都需要测试验证:网络是否已经打通。
特别特别注意: 1、在运维中心任务修改资源组周期任务是需要第二天才会生效,及时生效可以通过测试或者补数据运行即可; 2、__一定要先单个测试在批量修改,__一定要先单个测试在批量修改,__一定要先单个测试在批量修改 3、如果有网络打通的,优先将网络打通,可以在测试的时候验证出来的;
特别特别注意:可用区需要跟您的VPC在一个可用区:(就是你的任务是否需要访问VPC地址,比如访问ads、adb等,就需要跟次VPC在一个可用区)如果没有可用,提工单!
特别特别注意:虚节点、工作流、机器学习等任务类型不要选择上,因为这些不支持资源组修改;具体详见下面链接:
https://blog.csdn.net/yunqiinsight/article/details/104998980?share_token=66217ad5-10b9-4b54-8437-af5506d39f5d&tt_from=copy_link&utm_source=copy_link&utm_medium=toutiao_android&utm_campaign=client_share – 任务不再等待!玩转DataWorks资源组_阿里云云栖号的博… – 今日头条
可以检查下如下操作,是否配置的备库。 独享数据集成资源组创建成功后,您需要在配置数据集成任务时修改任务运行资源。 1、在资源组列表 > 独享资源组页面,单击相应资源后的修改归属工作空间,绑定独享数据集成资源组归属的工作空间。 2、在数据集成任务的编辑页面,通过调度运行及界面测试,选择运行时执行数据集成离线同步任务的资源组: – 单击左上角的全部图标,选择全部产品 > 数据开发 > DataStudio(数据开发),并切换至修改的归属工作空间。 – 在数据开发面板,双击打开相应节点的编辑页面。 – 单击右侧的数据集成资源组配置。 – 在数据集成资源组配置对话框中,选择相应的方案和资源组。
可以排查一下是不是数据集成部分的数据源没有切换过来