开发者社区 > 数据库 > 正文

数据归档到OSS的任务执行速度可以调整么?之前配置的任务归档执行起来速度很慢,2天才归档了9E数据,

数据归档到OSS的任务执行速度可以调整么?之前配置的任务归档执行起来速度很慢,2天才归档了9E数据,我们总共有40E数据,每日新增量近1000w数据,这块有什么提速的办法,而且归档过程中对数据库性能有一定的影响,造成数据库查询变慢,经常超时

展开
收起
真的很搞笑 2023-04-17 18:12:48 201 0
3 条回答
写回答
取消 提交回答
  • 不好意思 数据归档目前不能调整执行速度,此回答整理自钉群“阿里云DMS数据管理用户交流群”

    2023-04-19 08:03:50
    赞同 展开评论 打赏
  • 大鹏一日同风起,扶摇直上九万里

    你好,无法单独调整任务速度。

    建议: 1,优化任务调度,比如去掉 后置行为,数据校验等 2,设置任务归档配置,比如只归档部分核心表 3,可以分拆多个任务,并发执行调度 4,建议使用只读库做归档,减少生产库压力

    2023-04-17 18:49:49
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    您好,阿里云数据管理DMS数据归档到OSS的任务执行速度可以通过调整任务并发数来进行优化。

    在数据归档任务的配置中,您可以设置任务并发数,即同时执行归档任务的线程数。通过增加任务并发数,可以提高任务执行的速度。但是需要注意的是,并发数过大可能会对源数据库和目标OSS存储产生较大的压力,因此需要根据实际情况进行调整。

    此外,您还可以通过优化归档任务的数据过滤条件、调整OSS存储的读写速度等方式来提高任务执行速度。

    2023-04-17 18:18:53
    赞同 展开评论 打赏

数据库领域前沿技术分享与交流

相关电子书

更多
OSS运维进阶实战手册 立即下载
《OSS运维基础实战手册》 立即下载
OSS运维基础实战手册 立即下载