【MySQL】慢SQL优化

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: 慢SQL优化老生常谈了,今天聊一下优化时遇到的几个坑点。

MySQL系列文章

分析SQL

搜集sql

image.png

  • 按平均耗时倒序排序,取前10个进行优化

查看执行计划

  • 通过explain查看sql执行计划


关键字

解释

table

表名

type

连接的数据类型,由好到差const、eq_ref、ref、range、index、all

const表最多有一个匹配行,它将在查询开始时被读取。因为仅有一行,在这行的列值可被优化器剩余部分认为是常数。const表很快,因为它们只读取一次

eq_ref对于每个来自于前面的表的行组合,从该表中读取一行。这可能是最好的联接类型,除了const类型。

ref:对于每个来自于前面的表的行组合,所有有匹配索引值的行将从这张表中读取。

range:只检索给定范围的行,使用一个索引来选择行。

index:该联接类型与ALL相同,除了只有索引树被扫描。这通常比ALL快,因为索引文件通常比数据文件小

all:对于每个来自于先前的表的行组合,进行完整的表扫描。

rows

估算扫描行数

extra

using index condition:搜索条件中虽然出现了索引列,但是有部分条件无法使用索引,会根据能用索引的条件先搜索一遍再匹配无法使用索引的条件。

key

适用的索引

image.png

  • 主要注意几个地方
  • key:执行器选择的索引
  • rows:估算的扫描数据行数


缺少索引

看完执行计划之后判断是否缺少索引就很明朗了,直接看explain语句返回结果的key,如果为空则说明没有走索引。


创建索引要本着以结合where条件区分度最高的原则创建,考虑以下几个方面

联合索引最左匹配原则

  • 最左前缀匹配:mysql会一直向右匹配直到遇到范围查询
  • 联合索引结合索引结构推断,索引会在范围查询断掉
  • 最左优先,在检索数据时从联合索引的最左边开始匹配
  • 遇到范围查询(>、<、between、like)比较就会停止
  • 举例:
  • 创建一个 index_magor_class(magor,class) 的联合索引,那么它的索引树就是下图的样子
  • 我们查询的where 条件如果只传入了班级,是走不到联合索引的,但是如果只传了学院编号,是可能会走到联合索引的。(为什么说可能,MYSQL的执行计划和查询的实际执行过程并不完全吻合,比如你数据库数据量很少,可能直接全量遍历速度更快,就不走索引了)

索引覆盖

  • 结合业务场景适当考虑索引覆盖
  • 普通的索引查询步骤为,现根据索引定位到主键,再根据主键去查找数据行(回表操作)
  • 指查询列在索引列中,不需要回表操作


索引失效

  • 时间类型data_format会导致时间字段索引失效
  • 可以用date(ctime) < str_to_date('2019-12-30', '%Y-%m-%d')
  • 对索引字段使用计算操作或函数失效,类似&运算等
  • 使用like %key%使索引失效,大数据量全文检索尽量使用es
  • or关键字前后没有同时使用索引
  • 联合索引最左匹配原则顺序不符合规则
  • 索引字段使用is null 或 is not null
  • join语句字段编码不一致导致引擎走错索引
  • case when不走索引


业务分析

深度分页

  • 尽量在产品层上规避掉此类需求,比如操作日志,除了出大问题谁会看自己几月前甚至几年前的操作。
  • 规避不了的话就要考虑深度分页方案
  • limit n, m; n代表偏移量通常在业务系统需要page_no * page_size如果偏移量很大如何优化
  • 参考es的深度分页策略,滚动分页。利用id连续返回上次查询的最大记录(偏移量),基于上一次查询偏移量作为where条件
  • 业务中限制页数
  • 先通过索引列拿到主键,通过主键回表查详情
select a.*from emp a,(select id from emp limit1000000,10) b where a.id= b.id


是否需要select *

  • 查询字段会占用网络带宽,也会拖慢sql执行,所以尽量避免select *情况,按需查询





相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
5天前
|
存储 SQL 关系型数据库
【MySQL调优】如何进行MySQL调优?从参数、数据建模、索引、SQL语句等方向,三万字详细解读MySQL的性能优化方案(2024版)
MySQL调优主要分为三个步骤:监控报警、排查慢SQL、MySQL调优。 排查慢SQL:开启慢查询日志 、找出最慢的几条SQL、分析查询计划 。 MySQL调优: 基础优化:缓存优化、硬件优化、参数优化、定期清理垃圾、使用合适的存储引擎、读写分离、分库分表; 表设计优化:数据类型优化、冷热数据分表等。 索引优化:考虑索引失效的11个场景、遵循索引设计原则、连接查询优化、排序优化、深分页查询优化、覆盖索引、索引下推、用普通索引等。 SQL优化。
【MySQL调优】如何进行MySQL调优?从参数、数据建模、索引、SQL语句等方向,三万字详细解读MySQL的性能优化方案(2024版)
|
6天前
|
SQL 缓存 关系型数据库
MySQL高级篇——关联查询和子查询优化
左外连接:优先右表创建索引,连接字段类型要一致、内连接:驱动表由数据量和索引决定、 join语句原理、子查询优化:拆开查询或优化成连接查询
MySQL高级篇——关联查询和子查询优化
|
6天前
|
算法 关系型数据库 MySQL
MySQL高级篇——排序、分组、分页优化
排序优化建议、案例验证、范围查询时索引字段选择、filesort调优、双路排序和单路排序、分组优化、带排序的深分页优化
MySQL高级篇——排序、分组、分页优化
|
6天前
|
存储 关系型数据库 MySQL
MySQL高级篇——覆盖索引、前缀索引、索引下推、SQL优化、主键设计
覆盖索引、前缀索引、索引下推、SQL优化、EXISTS 和 IN 的区分、建议COUNT(*)或COUNT(1)、建议SELECT(字段)而不是SELECT(*)、LIMIT 1 对优化的影响、多使用COMMIT、主键设计、自增主键的缺点、淘宝订单号的主键设计、MySQL 8.0改造UUID为有序
MySQL高级篇——覆盖索引、前缀索引、索引下推、SQL优化、主键设计
|
4天前
|
SQL 监控 关系型数据库
MySQL数据库中如何检查一条SQL语句是否被回滚
检查MySQL中的SQL语句是否被回滚需要综合使用日志分析、事务状态监控和事务控制语句。理解和应用这些工具和命令,可以有效地管理和验证数据库事务的执行情况,确保数据的一致性和系统的稳定性。此外,熟悉事务的ACID属性和正确设置事务隔离级别对于预防数据问题和解决事务冲突同样重要。
15 2
|
7天前
|
SQL 关系型数据库 MySQL
SQL和MySQL
SQL和MySQL
24 1
|
2天前
|
NoSQL 关系型数据库 MySQL
微服务架构下的数据库选择:MySQL、PostgreSQL 还是 NoSQL?
在微服务架构中,数据库的选择至关重要。不同类型的数据库适用于不同的需求和场景。在本文章中,我们将深入探讨传统的关系型数据库(如 MySQL 和 PostgreSQL)与现代 NoSQL 数据库的优劣势,并分析在微服务架构下的最佳实践。
|
4天前
|
存储 SQL 关系型数据库
使用MySQL Workbench进行数据库备份
【9月更文挑战第13天】以下是使用MySQL Workbench进行数据库备份的步骤:启动软件后,通过“Database”菜单中的“管理连接”选项配置并选择要备份的数据库。随后,选择“数据导出”,确认导出的数据库及格式(推荐SQL格式),设置存储路径,点击“开始导出”。完成后,可在指定路径找到备份文件,建议定期备份并存储于安全位置。
64 11
|
24天前
|
弹性计算 关系型数据库 数据库
手把手带你从自建 MySQL 迁移到云数据库,一步就能脱胎换骨
阿里云瑶池数据库来开课啦!自建数据库迁移至云数据库 RDS原来只要一步操作就能搞定!点击阅读原文完成实验就可获得一本日历哦~
|
27天前
|
关系型数据库 MySQL 数据库
RDS MySQL灾备服务协同解决方案构建问题之数据库备份数据的云上云下迁移如何解决
RDS MySQL灾备服务协同解决方案构建问题之数据库备份数据的云上云下迁移如何解决

热门文章

最新文章