【巡检问题分析与最佳实践】RDS MySQL 实例空间问题

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
简介: 实例的空间使用率是RDS MySQL用户日常需要重点关注的监控项之一。如果实例的存储空间完全打满,将会导致严重的影响,包括:数据库无法写入、数据库备份无法正常完成、存储空间扩容任务的执行耗时可能更长等。一般来说,当一个RDS MySQL实例的存储空间使用比例达到80-85%以上时,就应及时进行处理,要么降低数据库实际占用空间的大小,要么对存储空间进行扩容,以避免空间打满的风险。

查看空间使用情况

RDS控制台

RDS MySQL的控制台中提供了多种查看实例空间使用情况的方法:

基本信息

在RDS控制台的“基本信息”页中会显示实例的总存储空间使用大小,但这里只有当前的空间使用总量,没有具体的各类数据分别占用空间大小的信息,也没有空间使用的历史信息。

0.png

监控与报警

在RDS控制台的“监控与报警”页中的“标准监控”->“资源监控”下,可以查看实例的各类数据占用的磁盘空间大小的信息,并且会显示各部分空间大小的历史变化曲线。

1.png

其中磁盘空间总体使用量即对应当前实例实际已经使用了的所有存储空间总量,它由如下四个部分组成:

数据空间使用量 数据文件总大小。
日志空间使用量 日志文总大小
临时文件空间使用量 临时文件空间的大小
系统文件空间使用量

共享表空间等文件的大小


数据库自治服务

在RDS控制台的“自治服务”->“一键诊断”->“空间分析”页中可以查看实例内更详细的空间使用情况,包括数据与日志的空间使用对比、空间使用的历史变化趋势、Top数据库和Top表的空间分配明细等。

2.png3.png



这个列表中的统计,则是针对数据库中的表所使用的数据文件空间。其中“表空间”为“数据空间”、“索引空间”、“未使用空间”三部分之和,它们的具体含义如下:

保留大小 已保留给该表的所有空间总和,包括数据、索引及未使用的部分
数据空间 表中的数据使用的总空间
索引空间 表中的所有索引使用的总空间
未使用空间 已保留给该表但还未分配使用的空间

需要注意的是上面列表中的空间大小是从统计信息中采集的,和真实的空间大小可能会存在误差。


命令行如何查看表空间

执行SQL命令:show table status like 'table_name'

常见空间的问题

为什么空间大

索引太多

一般表上除了主键索引,还存在二级索引,二级索引越多,整个表空间越大,同时索引太多也会造成写入时IO吞吐会放大。

有大字段

如果表结构定义中有blob、text、很长的varchar等大字段,也会占用更大的表空间,建议将数据压缩以后再插入。

空闲表空间太多

这里指的是InnoDB表的碎片率高。InnoDB是按Page(16KB)管理表空间的,如果Page写满记录,然后部分记录又被delete sql删除,后续这些删除的记录位置又没有新的记录插入,就可能造成空间没有被很好的利用。可以通过SQL语句 show table status like 'table_name' 查看表上空闲的空间,如果空闲空间特别大,可以执行optimize table table_name语句整理表空间。

临时表空间或临时文件过大

semi join和distinct去重、不走索引的order by /group by等SQL,会使用临时表来做去重和排序分组,如果涉及的数据量特别大,可能导致临时表空间ibtmp1特别大。Select 是否会使用临时表可以explain查看执行计划,看是否包含 Using Temporary。


还有一种情况是DDL重建表空间时,如果表特别大,创建索引排序时产生的临时文件也会特别大。对于RDS 5.6和RDS 5.7不支持即时加字段,很多DDL是通过创建新表的实现的,DDL执行结束再删除老表,DDL过程中会同时存在2份表空间,所以对大表DDL需要注意实例的空间是否足够,否则空间不足会造成DDL失败。

空间优化方案

  1. 云盘会支持比本地盘实例更大的空间。
  2. PolarDB采用分布式存储也支持非常大的存储空间,且按需自动扩容。
  3. RDS 创建时选xengine引擎,xengine是支持高压缩比的存储引擎。
  4. 采用分析型数据库等。
相关实践学习
自建数据库迁移到云数据库
本场景将引导您将网站的自建数据库平滑迁移至云数据库RDS。通过使用RDS,您可以获得稳定、可靠和安全的企业级数据库服务,可以更加专注于发展核心业务,无需过多担心数据库的管理和维护。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
7月前
|
缓存 关系型数据库 BI
使用MYSQL Report分析数据库性能(下)
使用MYSQL Report分析数据库性能
485 158
|
6月前
|
存储 消息中间件 监控
MySQL 到 ClickHouse 明细分析链路改造:数据校验、补偿与延迟治理
蒋星熠Jaxonic,数据领域技术深耕者。擅长MySQL到ClickHouse链路改造,精通实时同步、数据校验与延迟治理,致力于构建高性能、高一致性的数据架构体系。
MySQL 到 ClickHouse 明细分析链路改造:数据校验、补偿与延迟治理
|
7月前
|
关系型数据库 MySQL 数据库
自建数据库如何迁移至RDS MySQL实例
数据库迁移是一项复杂且耗时的工程,需考虑数据安全、完整性及业务中断影响。使用阿里云数据传输服务DTS,可快速、平滑完成迁移任务,将应用停机时间降至分钟级。您还可通过全量备份自建数据库并恢复至RDS MySQL实例,实现间接迁移上云。
|
7月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS费用价格:MySQL、SQL Server、PostgreSQL和MariaDB引擎收费标准
阿里云RDS数据库支持MySQL、SQL Server、PostgreSQL、MariaDB,多种引擎优惠上线!MySQL倚天版88元/年,SQL Server 2核4G仅299元/年,PostgreSQL 227元/年起。高可用、可弹性伸缩,安全稳定。详情见官网活动页。
1201 152
|
7月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎,提供高性价比、稳定安全的云数据库服务,适用于多种行业与业务场景。
901 156
|
7月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(中)
使用MYSQL Report分析数据库性能
505 156
|
7月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(上)
最终建议:当前系统是完美的读密集型负载模型,优化重点应放在减少行读取量和提高数据定位效率。通过索引优化、分区策略和内存缓存,预期可降低30%的CPU负载,同时保持100%的缓冲池命中率。建议每百万次查询后刷新统计信息以持续优化
608 161
|
6月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
721 6
|
7月前
|
存储 弹性计算 关系型数据库
如何通过控制台创建RDS MySQL实例
本文介绍了通过控制台创建RDS MySQL实例的详细步骤,包括准备工作、选择计费方式、地域、实例规格、存储空间等关键配置,并指导用户完成下单与实例查看。
|
8月前
|
存储 关系型数据库 MySQL
【赵渝强老师】MySQL数据库的多实例环境
MySQL多实例是指在一台服务器上运行多个MySQL服务,通过不同端口提供独立的数据服务。各实例共享安装程序,但使用各自的配置文件和数据文件,实现资源高效利用。本文详细介绍了如何通过“mysqld_multi”工具配置和启动多个MySQL实例,并演示了目录创建、初始化、配置文件修改及实例启动等操作步骤。
352 1

相关产品

  • 云数据库 RDS MySQL 版
  • 云数据库 RDS
  • 推荐镜像

    更多