使用explain优化慢查询的业务场景分析
- 问:你最害怕的事情是什么?
- 答:搓澡
- 问:为什么?
- 答:因为有些人一旦错过,就不在了
Explain
这个词在不同的上下文中有不同的含义。在数据库查询优化的上下文中,"EXPLAIN" 是一个常用的 SQL 命令,用于显示 SQL 查询的执行计划。执行计划是数据库如何执行查询的一个详细描述,包括它将使用哪些索引、表的连接顺序、表的扫描方式等信息。
在 SQL 中,使用 "EXPLAIN" 可以提供以下字段的信息:
- id: 表示查询中的各个部分的标识符。
- select_type: 查询类型,比如简单查询、联合查询、子查询等。
- table: 涉及的表名。
- partitions: 查询涉及的分区信息。
- type: 连接类型,如全表扫描、索引扫描等。
- possible_keys: 可能使用的索引列表。
- key: 实际使用的索引。
- key_len: 使用的索引长度。
- ref: 索引列上使用的列或常量。
- rows: 估计需要检查的行数。
- filtered: 行过滤的百分比。
- Extra: 额外信息,可能包含诸如"Using filesort"、"Using temporary"等信息。
下面,V 哥通过两个案例来详细说明一下如何使用 Explain来优化 SQL。
案例一:
场景设定
假设我们有一个电子商务网站的数据库,其中有一个名为 orders 的表,它记录了用户的订单信息。表结构大致如下:
id: 订单的唯一标识符
user_id: 下单用户的ID
product_id: 购买的产品ID
order_date: 下单日期
quantity: 购买数量
问题
我们需要查询2024年1月1日之后所有用户的订单总数。
原始 SQL 查询
SELECT COUNT(*) FROM orders WHERE order_date > '2024-01-01';
步骤 1: 使用 EXPLAIN 分析查询
首先,我们使用 EXPLAIN 来查看当前查询的执行计划:
EXPLAIN SELECT COUNT(*) FROM orders WHERE order_date > '2024-01-01';
步骤 2: 分析 EXPLAIN 输出
假设 EXPLAIN 的输出显示如下:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | SIMPLE | orders | NULL | range | order_date | NULL | NULL | NULL | 10000 | 10.00 | Using where; Using index |
步骤 3: 识别问题
从 EXPLAIN 输出中,我们可以看到:
- type 是 range,这意味着数据库将使用索引进行范围扫描,而不是全表扫描。
- rows 估计为 10000,这可能表示查询需要检查大量行。
- Extra 显示 Using where; Using index,表示使用了索引。
步骤 4: 优化 SQL
尽管查询已经使用了索引,但我们可能希望进一步优化性能。考虑到我们只需要统计总数,而不是具体的订单数据,我们可以:
- 使用索引覆盖扫描:如果 order_date 索引包含 id,则可以避免回表查询,直接在索引中完成统计。
优化后的 SQL 可能如下:
SELECT COUNT(*) FROM orders USE INDEX (order_date) WHERE order_date > '2023-01-01';
步骤 5: 再次使用 EXPLAIN
使用优化后的查询再次运行 EXPLAIN:
EXPLAIN SELECT COUNT(*) FROM orders USE INDEX (order_date) WHERE order_date > '2023-01-01';
步骤 6: 分析优化后的输出
假设优化后的 EXPLAIN 输出显示:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | SIMPLE | orders | NULL | index | order_date | order_date | 4 | NULL | 10000 | 10.00 | Using index; Backward index scan |
步骤 7: 评估优化效果
- type 现在是 index,表示使用了索引覆盖扫描。
- Extra 显示 Using index; Backward index scan,表示查询仅使用了索引,没有回表。
通过这些步骤,我们对原始查询进行了分析和优化,提高了查询效率。在实际应用中,可能需要根据具体的数据库结构和数据分布进行更多的调整和优化。
案例二:
我们考虑一个更复杂的场景,涉及到多表查询和联结。
场景设定
假设我们有一个在线教育平台的数据库,其中有两个表:
1. students 表,存储学生信息:
- student_id: 学生ID
- name: 学生姓名
- enrollment_date: 入学日期
2. courses 表,存储课程信息:
- course_id: 课程ID
- course_name: 课程名称
3. 还有一个 enrollments 表,存储学生的课程注册信息:
- enrollment_id: 注册ID
- student_id: 学生ID
- course_id: 课程ID
- enrollment_date: 注册日期
问题
我们需要查询所有在2024年注册了至少一门课程的学生的姓名和他们注册的课程数量。
原始 SQL 查询
SELECT s.name, COUNT(e.course_id) AS course_count
FROM students s
JOIN enrollments e ON s.student_id = e.student_id
GROUP BY s.name;
步骤 1: 使用 EXPLAIN 分析查询
EXPLAIN SELECT s.name, COUNT(e.course_id) AS course_count
FROM students s
JOIN enrollments e ON s.student_id = e.student_id
GROUP BY s.name;
步骤 2: 分析 EXPLAIN 输出
假设 EXPLAIN 的输出如下:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | SIMPLE | s | NULL | ALL | NULL | NULL | NULL | NULL | 1000 | NULL | NULL |
1 | SIMPLE | e | NULL | ref | student_id | student_id | 5 | students.student_id | 5000 | NULL | Using where |
步骤 3: 识别问题
- students 表使用了全表扫描(type 是 ALL),这意味着查询需要扫描整个 students 表。
- enrollments 表使用了 ref 类型的联结,它使用了 student_id 索引。
步骤 4: 优化 SQL
我们可以通过以下方式优化查询:
- 添加索引:如果 enrollments 表上的 enrollment_date 没有索引,考虑添加一个,以便快速过滤2023年的注册记录。
- 过滤条件:在联结条件中添加过滤条件,减少需要联结的行数。
优化后的 SQL 可能如下:
SELECT s.name, COUNT(e.course_id) AS course_count
FROM students s
JOIN (
SELECT course_id, student_id
FROM enrollments
WHERE enrollment_date >= '2023-01-01'
) e ON s.student_id = e.student_id
GROUP BY s.name;
步骤 5: 再次使用 EXPLAIN
使用优化后的查询再次运行 EXPLAIN。
步骤 6: 分析优化后的输出
假设优化后的 EXPLAIN 输出显示:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | PRIMARY | s | NULL | ALL | NULL | NULL | NULL | NULL | 1000 | NULL | NULL |
2 | DERIVED | e | NULL | range | enrollment_date | NULL | NULL | NULL | 500 | 10.00 | Using where |
1 | SIMPLE | <subquery2> |
NULL | ref | student_id | student_id | 5 | s.student_id | 500 | NULL | Using index |
步骤 7: 评估优化效果
- 子查询 e 现在使用 range 类型扫描,只获取2023年的注册记录,减少了行数。
- 主查询现在使用 ref 类型联结,因为子查询结果已经通过索引 student_id 进行了优化。
通过这些步骤,我们对原始查询进行了分析和优化,减少了需要处理的数据量,提高了查询效率。在实际应用中,可能需要根据具体的数据库结构和数据分布进行更多的调整和优化。
最后
以上是 V 哥在整理的关于 EXPLAIN 在实际工作中的使用,并结合案例给大家作了分析,用熟 EXPLAIN 将大大改善你的 SQL 查询效率,你在工作中还用到哪些业务场景或案例,可以在评论区讨论,或者说出你遇到的问题,V 哥来帮你定位一下问题,关注威哥爱编程
,每天精彩内容不错过。
使用explain优化慢查询的业务场景分析的更多相关文章
- SpringCloud | 通过电商业务场景让你彻底明白SpringCloud核心组件的底层原理
本文分为两个部分: Spring Cloud"全家桶"简单介绍. 通过实际电商业务场景,让你彻底明白Spring Cloud几个核心组件的底层原理. Spring Cloud介绍 ...
- mysql性能优化-慢查询分析、优化索引和配置 (慢查询日志,explain,profile)
mysql性能优化-慢查询分析.优化索引和配置 (慢查询日志,explain,profile) 一.优化概述 二.查询与索引优化分析 1性能瓶颈定位 Show命令 慢查询日志 explain分析查询 ...
- 索引优化之Explain 及慢查询日志
索引:本质是数据结构,简单理解为:排好序的快速查找数据结构,以索引文件的形式存储在磁盘中.目的:提高数据查询的效率,优化查询性能,就像书的目录一样.优势:提高检索效率,降低IO成本:排好序的表,降低C ...
- mysql,存储引擎,事务,锁,慢查询,执行计划分析,sql优化
基础篇:MySql架构与存储引擎 逻辑架构图: 连接层: mysql启动后(可以把mysql类比为一个后台的服务器),等待客户端请求,当请求到来后,mysql建立一个一个线程处理(线程池则分配一个空线 ...
- 10个常见触发IO瓶颈的高频业务场景
摘要:本文从应用业务优化角度,以常见触发IO慢的业务SQL场景为例,指导如何通过优化业务去提升IO效率和降低IO. 本文分享自华为云社区<GaussDB(DWS)性能优化之业务降IO优化> ...
- 通过手动创建统计信息优化sql查询性能案例
本质原因在于:SQL Server 统计信息只包含复合索引的第一个列的信息,而不包含复合索引数据组合的信息 来源于工作中的一个实际问题, 这里是组合列数据不均匀导致查询无法预估数据行数,从而导致无法选 ...
- 受教了,memcache比较全面点的介绍,受益匪浅,适用memcached的业务场景有哪些?memcached的cache机制是怎样的?在设计应用时,可以通过Memcached缓存那些内容?
基本问题 1.memcached的基本设置 1)启动Memcache的服务器端 # /usr/local/bin/memcached -d -m 10 -u root -l 192.168.0.200 ...
- CDN 边缘规则,三秒部署、支持定制、即时生效,多种规则覆盖常用业务场景
2017年的最后一周,又拍云进行了一次重要升级,将自定义 Rewrite 升级为"边缘规则".互联网应用场景的日益多样化,简单.方便.快速的根据不同应用场景实现不同的功能变得越来越 ...
- 整理分布式锁:业务场景&分布式锁家族&实现原理
1.引入业务场景 业务场景一出现: 因为小T刚接手项目,正在吭哧吭哧对熟悉着代码.部署架构.在看代码过程中发现,下单这块代码可能会出现问题,这可是分布式部署的,如果多个用户同时购买同一个商品,就可能导 ...
- 【性能优化】优雅地优化慢查询:缓存+SQL修改组合拳
问题描述 单例数据库模式中,后端高并发请求多(读多写少),导致数据库压力过大,关键接口响应变慢,严重影响体验. 需求 减少接口的响应时间. 寻找解决方案 由于问题主要处在数据库压力过大的情况,采用两种 ...
随机推荐
- Solution Set - 矩阵加速
A[HDU2604]求不含子串010和000的,长为\(n\)的01序列数. B[HDU6470]数列\(\{a_n\}:a_1=1,a_2=2,a_n=a_{n-1}+2a_{n-2}+n^3\), ...
- 大数据面试SQL每日一题系列:最高峰同时在线主播人数。字节,快手等大厂高频面试题
大数据面试SQL每日一题系列:最高峰同时在线主播人数.字节,快手等大厂高频面试题 之后会不定期更新每日一题sql系列. SQL面试题每日一题系列内容均来自于网络以及实际使用情况收集,如有雷同,纯属巧合 ...
- 国外anonfiles网盘大文件下载器
各位注意了,这个网站很久以前是可以国内直接访问的,后来被墙了,但仍然可以使用代理下载,现如今,6天前大概2023年8月10号左右这个网站已经挂了,就是彻底不能用了,所有与之有关的东西比如网页,都是假的 ...
- Linux — 物理内存管理
物理内存的组织方式 物理内存是由连续的一页一页的块组成,每个物理页都有页号 每个页由struct page表示,放进数组里--平坦内存模型 SMP和NUMA SMP中,总线会称为瓶颈,因为数据都要经过 ...
- Splashtop 扩展了所有 Android 8.0 以上设备的远程控制功能
好消息:Splashtop远程访问和远程支持软件现在支持100多个品牌的 Android 设备. 2020年9月15日,远程访问和远程支持解决方案的全球领导者 Splashtop Inc. 宣布:所有 ...
- 单体项目使用Spring Security实现登陆认证授权
前端可以根据权限信息控制菜单和页面展示,操作按钮的显示.但这并不够,如果有人拿到了接口,绕过了页面直接操作数据,这是很危险的.所以我们需要在后端也加入权限控制,只有拥有操作权限,该接口才能被授权访问. ...
- PHP 中使用 ElasticSearch 的最佳实践(上)
PHP 中使用 ElasticSearch 的最佳实践 引言 PHP 开发者其实使用到 ES 的情况并不多,因为开发的大多数项目可能都没有快速模糊搜索的需求. 即使有这样的需求,用 MySQL 的 l ...
- uniapp 上拉加载下拉刷新
page.json中配置"enablePullDownRefresh": true //单个页面修改刷新按钮的颜色 "app-plus": { "ti ...
- Centos安装Redis(极速安装)
下载 从官网找到下载文件,我下载的是redis-6.0.16.tar.gz. 安装 1. 解压文件 解压文件然后,进入解压文件夹: tar -zxvf redis-6.0.16.tar.gz cd r ...
- ETL工具-nifi干货系列 第十五讲 nifi处理器ConsumeKafka实战教程
1.上一节课我们学习了处理器PushKafka,通过该处理器往kafka中间件写数据,今天我们一起学习处理器ConsumeKafka,此处理器从kafka读取数据进行后续处理,如下图所示: 本次示例比 ...