百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

经常使用的order by 和 group by你了解吗?filesort你了解吗?

ztj100 2024-10-28 21:12 14 浏览 0 评论

1. 案例

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' AND position = 'dev' ORDER BY age

最左前缀法则:中间字段不能断,因此查询只用到了name索引,从key_len也能看出

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY position

从key_len看出,只用到了name索引,由于用了position排序,跳过了age,出现了Using filesort

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY age,position

查看只用到索引name,age和position用于排序

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY position,age

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' AND age = 18 ORDER BY position,age

Extra中未出现Using filesort,因为age是常量,排序中被优化了,所以索引未颠倒,不会出现Using filesort

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY age ASC, position DESC

虽然排序字段列和索引顺序一致,且order by默认升序,这里position desc变成了降序,导致索引的排序方式不同,从而产生Using filesort,MySQL8以上支持这种

2. 总结

  • MySQL支持两种方式排序filesort和index,Using index只MySQL扫描索引本身完成排序,index效率高,filesort效率低
  • order by满足两种情况会使用Using index
  • order by语句使用索引最左前缀列
  • 使用where子句与order by子句条件列组合满足最左前缀列
  • 尽量在索引列上完成排序,遵循索引建立的顺序
  • 如果order by的条件不在索引列上,会产生Using filesort
  • 能用覆盖索引就用覆盖索引
  • group by 和 order by类似,就是先排序后分组遵循最左前缀法则

3. Using filesort

filesort文件排序方式

  • 单路排序:一次性取出满足条件行的所有字段,然后在sort buffer中进行排序;用trace工具可以看到sort_mode信息里显示< sort_key, additional_fields >或者< sort_key,packed_additional_fields >
  • 双路排序(回表排序模式):根据相应条件取出相应的排序字段可以直接定位行数据的行ID,在sort buffer中排序,排完序后再次取回需要的字段,用trace工具可以在sort_mode中看到< sort_key, rowid >

MySQL通过比较默认系统值max_length_for_sort_data(默认1024字节)的大小和需要查询的字段总大小来判断使用那种模式

  • max_length_for_sort_data > 查询字段总长度 , 使用单路排序模式
  • max_length_for_sort_data < 查询字段总长度, 使用双路排序模式

单路排序详细过程:

  1. 从索引name找到第一个满足 name = ‘zhuge’ 条件的主键 id
  1. 根据主键 id 取出整行,取出所有字段的值,存入 sort_buffer 中
  1. 从索引name找到下一个满足 name = ‘zhuge’ 条件的主键 id
  1. 重复步骤 2、3 直到不满足 name = ‘zhuge’
  1. 对 sort_buffer 中的数据按照字段 position 进行排序
  1. 返回结果给客户端

双路排序详细过程:

  1. 从索引 name 找到第一个满足 name = ‘zhuge’ 的主键id
  1. 根据主键 id 取出整行,把排序字段 position 和主键 id 这两个字段放到 sort buffer 中
  1. 从索引 name 取下一个满足 name = ‘zhuge’ 记录的主键 id
  1. 重复 3、4 直到不满足 name = ‘zhuge’
  1. 对 sort_buffer 中的字段 position 和主键 id 按照字段 position 进行排序
  1. 遍历排序好的 id 和字段 position,按照 id 的值回到原表中取出 所有字段的值返回给客户端

单路排序会把查询到的字段信息全部放到sort buffer中,而双路排序只会把主键和需要排序的字段放到sort buffer中,然后通过主键回表查询

如果MySQL内存配置小且无法增加,可以把max_length_for_sort_data 调小,去选择双路排序,sort buffer一次可以放更多排序值

单路排序是从内存sort buffer去拿数据,要快于从磁盘中拿数据

相关推荐

从IDEA开始,迈进GO语言之门(idea got)

前言笔者在学习GO语言编程的时候,GO语言在国内还没有像JAVA/Php/Python那样普及,绕了不少的弯路,要开始入门学习一门编程语言,最好就先从选择一个好的编程语言的开发环境开始,有了这个开发环...

基于SpringBoot+MyBatis的私人影院java网上购票jsp源代码Mysql

本项目为前几天收费帮学妹做的一个项目,JavaEEJSP项目,在工作环境中基本使用不到,但是很多学校把这个当作编程入门的项目来做,故分享出本项目供初学者参考。一、项目介绍基于SpringBoot...

基于springboot的个人服装管理系统java网上商城jsp源代码mysql

本项目为前几天收费帮学妹做的一个项目,JavaEEJSP项目,在工作环境中基本使用不到,但是很多学校把这个当作编程入门的项目来做,故分享出本项目供初学者参考。一、项目介绍基于springboot...

基于springboot的美食网站Java食品销售jsp源代码Mysql

本项目为前几天收费帮学妹做的一个项目,JavaEEJSP项目,在工作环境中基本使用不到,但是很多学校把这个当作编程入门的项目来做,故分享出本项目供初学者参考。一、项目介绍基于springboot...

贸易管理进销存springboot云管货管账分析java jsp源代码mysql

本项目为前几天收费帮学妹做的一个项目,JavaEEJSP项目,在工作环境中基本使用不到,但是很多学校把这个当作编程入门的项目来做,故分享出本项目供初学者参考。一、项目描述贸易管理进销存spring...

SpringBoot+VUE员工信息管理系统Java人员管理jsp源代码Mysql

本项目为前几天收费帮学妹做的一个项目,JavaEEJSP项目,在工作环境中基本使用不到,但是很多学校把这个当作编程入门的项目来做,故分享出本项目供初学者参考。一、项目介绍SpringBoot+V...

目前见过最牛的一个SpringBoot商城项目(附源码)还有人没用过吗

帮粉丝找了一个基于SpringBoot的天猫商城项目,快速部署运行,所用技术:MySQL,Druid,Log4j2,Maven,Echarts,Bootstrap...免费给大家分享出来前台演示...

SpringBoot+Mysql实现的手机商城附带源码演示导入视频

今天为大家带来的是基于SpringBoot+JPA+Thymeleaf框架的手机商城管理系统,商城系统分为前台和后台、前台用的是Bootstrap框架后台用的是SpringBoot+JPA都是现在主...

全网首发!马士兵内部共享—1658页《Java面试突击核心讲》

又是一年一度的“金九银十”秋招大热门,为助力广大程序员朋友“面试造火箭”,小编今天给大家分享的便是这份马士兵内部的面试神技——1658页《Java面试突击核心讲》!...

SpringBoot数据库操作的应用(springboot与数据库交互)

1.JDBC+HikariDataSource...

SpringBoot 整合 Flink 实时同步 MySQL

1、需求在Flink发布SpringBoot打包的jar包能够实时同步MySQL表,做到原表进行新增、修改、删除的时候目标表都能对应同步。...

SpringBoot + Mybatis + Shiro + mysql + redis智能平台源码分享

后端技术栈基于SpringBoot+Mybatis+Shiro+mysql+redis构建的智慧云智能教育平台基于数据驱动视图的理念封装element-ui,即使没有vue的使...

Springboot+Mysql舞蹈课程在线预约系统源码附带视频运行教程

今天发布的是由【猿来入此】的优秀学员独立做的一个基于springboot脚手架的Springboot+Mysql舞蹈课程在线预约系统,系统项目源代码在【猿来入此】获取!https://www.yuan...

SpringBoot+Mysql在线众筹系统源码+讲解视频+开发文档(参考论文

今天发布的是由【猿来入此】的优秀学员独立做的一个基于springboot脚手架的在线众筹管理系统,主要实现了普通用户在线参与众筹基本操作流程的全部功能,系统分普通用户、超级管理员等角色,除基础脚手架外...

Docker一键部署 SpringBoot 应用的方法,贼快贼好用

这两天发现个Gradle插件,支持一键打包、推送Docker镜像。今天我们来讲讲这个插件,希望对大家有所帮助!GradleDockerPlugin简介...

取消回复欢迎 发表评论: