MySQL中SQL查询常见调优方案对比与实践!

MySQL中SQL查询常见调优方案对比与实践!

 作者:浅沫云归
文章浏览阅读429次,点赞3次,收藏2次。本文从索引优化、查询重写、分库分表、缓存方案四个角度,对SQL调优进行对比分析,并结合真实生产环境案例验证了各方案的应用效果,为后端开发者提供实用的最佳实践指导。

问题背景介绍

在大型互联网或企业级应用中,数据库往往成为系统性能的瓶颈。随着数据量和并发量的增长,单一的 SQL 查询可能出现响应迟缓、锁等待、全表扫描等性能问题。为保证系统的稳定性和用户体验,需要对 SQL 查询做深入的调优。常见的调优手段包括索引优化、查询重写、分库分表、缓存方案等。本文将从多种方案入手,对比分析各自优缺点,并结合真实生产环境案例展示调优效果。

多种解决方案对比

方案 A:索引优化

  • 原理:为频繁筛选或排序的列建立合适的索引,避免全表扫描。
  • 实现:使用 B-Tree、哈希索引或覆盖索引。

示例:为订单表的user_idcreated_at建联合索引:

1
2
ALTER TABLE orders
ADD INDEX idx_user_created (user_id, created_at DESC);

使用 EXPLAIN 查看执行计划:

1
2
3
4
EXPLAIN SELECT * FROM orders
WHERE user_id = 1234
ORDER BY created_at DESC
LIMIT 10;

方案 B:查询重写与分页优化

  • 原理:通过拆分复杂 SQL,避免大范围排序与联表;优化分页查询。
  • 实现:利用覆盖索引分页、二次过滤或游标。

示例:传统高页码分页会严重影响性能:

1
2
3
4
SELECT * FROM orders
WHERE user_id = 1234
ORDER BY created_at DESC
LIMIT 100000, 20;

重写为“基于最后读取位置的分页”:

1
2
3
4
5
6
7
8
-- 前一页最后一行的 created_at 值
SET @last_time = '2024-07-01 12:34:56';
SELECT * FROM orders
WHERE user_id = 1234
AND created_at < @last_time
ORDER BY created_at DESC
LIMIT 20;

方案 C:分区表 & 分库分表

  • 原理:通过按时间或用户 ID 手动/自动划分表或数据库,减少单表或单库数据量。
  • 实现:MySQL 原生分区、Proxy 层分片、ShardingSphere 等。

示例:按月份进行分区:

1
2
3
4
5
ALTER TABLE orders
PARTITION BY RANGE (TO_DAYS(created_at)) (
PARTITION p202407 VALUES LESS THAN (TO_DAYS('2024-08-01')),
PARTITION p202408 VALUES LESS THAN (TO_DAYS('2024-09-01'))
);

方案 D:缓存层(Redis)

  • 原理:将热点查询结果缓存在内存中,减少数据库压力。
  • 实现:使用 Redis 哈希、Sorted Set 或自定义缓存策略。

示例:通过 Spring Cache 简单集成:

1
2
3
4
5
6
7
@Service
public class OrderService {
@Cacheable(value = "orderList", key = "#userId")
public List<Order> getRecentOrders(long userId) {
return orderMapper.findByUserOrderByCreatedAt(userId, 20);
}
}

各方案优缺点分析

方案 优点 缺点
索引优化 最基础、低成本;即插即用;显著减少全表扫描 建索引占用空间;写入性能略有下降;对复杂查询提升有限
查询重写 针对性强;可解决分页等特定问题 代码层复杂度上升;需分析不同场景重写策略
分区/分表 支撑超大规模数据;单表/单库规模可控 设计和运维复杂;跨分区/跨库查询难;可能导致跨库事务问题
缓存层 减少数据库压力;提升响应速度 缓存一致性、热点失效、二级缓存上下文复杂

选型建议与适用场景

数据量中等(百万级)且查询模式稳定:优先考虑方案 A:索引优化方案 B:查询重写。低成本、风险小。

业务增长迅速、表数据量突破千万甚至亿级:结合方案 C:分区表/分库分表。大型电商、日志系统等。

热点数据重复访问高:在以上方案基础上引入方案 D:缓存层。防止缓存雪崩采用双层缓存或预热策略。

混合场景:可按业务模块拆分策略(OLTP 与 OLAP 分离),或采用 HTAP 数据库(如 TiDB)兼顾多种需求。

实际应用效果验证

场景:电商订单列表查询

  • 典型 SQL:按照用户查询、按下单时间倒序分页。
  • 初始数据:orders 表记录量 5000 万,按页码分页时 5000 页后响应时间超 2s。

优化前 EXPLAIN:

1
2
3
4
5
+----+-------------+--------+------+---------------+------+---------+------+--------+-------------+
| id | select_type | table  | type | possible_keys | key  | rows    | Extra                |
+----+-------------+--------+------+---------------+------+---------+------+--------+-------------+
|  1 | SIMPLE      | orders | ALL  | NULL          | NULL | 50000000| Using filesort       |
+----+-------------+--------+------+---------------+------+---------+------+--------+-------------+
  • 方案 A 索引优化:新增(user_id, created_at)联合索引后,响应时间降至 200ms。
  • 方案 B 分页重写:基于created_at游标分页,5000 页查询 95% 都在 50ms 内完成。
  • 方案 C 分库分表:按用户哈希分 8 库后,最慢页响应 < 100ms。
  • 方案 D Redis 缓存:热点前 100 页结果均在 5ms 内返回。

综合来看,方案 A + 方案 B是快速见效的低成本首选;方案 C + 方案 D可结合应对超高并发与 PB 级数据量。

到此这篇关于MySQL中SQL查询常见调优方案对比与实践的文章就介绍到这了。

 

 

学习资料见知识星球。

以上就是今天要分享的技巧,你学会了吗?若有什么问题,欢迎在下方留言。

快来试试吧,小琥 my21ke007。获取 1000个免费 Excel模板福利​​​​!

更多技巧, www.excelbook.cn

欢迎 加入 零售创新 知识星球,知识星球主要以数据分析、报告分享、数据工具讨论为主;

Excelbook.cn Excel技巧 SQL技巧 Python 学习!

你将获得:

1、价值上万元的专业的PPT报告模板。

2、专业案例分析和解读笔记。

3、实用的Excel、Word、PPT技巧。

4、VIP讨论群,共享资源。

5、优惠的会员商品。

6、一次付费只需129元,即可下载本站文章涉及的文件和软件。

文章版权声明 1、本网站名称:Excelbook
2、本站永久网址:http://www.excelbook.cn
3、本网站的文章部分内容可能来源于网络,仅供大家学习与参考,如有侵权,请联系站长王小琥进行删除处理。
4、本站一切资源不代表本站立场,并不代表本站赞同其观点和对其真实性负责。
5、本站一律禁止以任何方式发布或转载任何违法的相关信息,访客发现请向站长举报。
6、本站资源大多存储在云盘,如发现链接失效,请联系我们我们会第一时间更新。

THE END
分享
二维码
< <上一篇
下一篇>>