数据归档到OSS的任务执行速度可以调整么?之前配置的任务归档执行起来速度很慢,2天才归档了9E数据,[阿里云数据管理DMS]

数据归档到OSS的任务执行速度可以调整么?之前配置的任务归档执行起来速度很慢,2天才归档了9E数据,我们总共有40E数据,每日新增量近1000w数据,这块有什么提速的办法,而且归档过程中对数据库性能有一定的影响,造成数据库查询变慢,经常超时

「点点赞赏,手留余香」

    还没有人赞赏,快来当第一个赞赏的人吧!
=====这是一个广告位,招租中,联系qq 78315851====
2 条回复 A 作者 M 管理员
  1. 不好意思 数据归档目前不能调整执行速度,此回答整理自钉群“阿里云DMS数据管理用户交流群”

  2. 你好,无法单独调整任务速度。

    建议: 1,优化任务调度,比如去掉 后置行为,数据校验等 2,设置任务归档配置,比如只归档部分核心表 3,可以分拆多个任务,并发执行调度 4,建议使用只读库做归档,减少生产库压力

  3. 您好,阿里云数据管理DMS数据归档到OSS的任务执行速度可以通过调整任务并发数来进行优化。

    在数据归档任务的配置中,您可以设置任务并发数,即同时执行归档任务的线程数。通过增加任务并发数,可以提高任务执行的速度。但是需要注意的是,并发数过大可能会对源数据库和目标OSS存储产生较大的压力,因此需要根据实际情况进行调整。

    此外,您还可以通过优化归档任务的数据过滤条件、调整OSS存储的读写速度等方式来提高任务执行速度。