Mysql using filesort 优化

Posted 2023-03-22

参考技术A 1、利用有序索引获取有序数据： using index

2、文件排序: using filesort

如果索引不能用于满足 ORDER BY 子句，mysql 将执行 filesort 读取表行并对它们进行排序的操作。内存大小根据 sort_buffer_size 系统变量来控制(每个thread独享的，同一时刻在mysql可能存在多个sort buffer区域)，如果结果集太大无法在内存中，就会使用临时磁盘文件

1、使用索引并且只选择索引列

如果还必须读取不在索引中的列 select * ，全表扫描快就不走索引了

例子：game_order_info建立复合索引（game_id,source_id）

2、 key_part1 是常量，所以通过索引访问的所有行都是 key_part2 有序的，如果子句有足够的选择性使得索引范围扫描比表扫描便宜，则索引可以避免排序： ( key_part1 , key_part2 )

例子：

3、 key_part1 将与一个常量进行比较。如果 WHERE 子句的选择性足以使索引范围扫描比表扫描的行少，则使用索引

4、 ORDER BY 没有 key_part1 ，但所有选定的行都有一个常 key_part1 量值，因此仍然可以使用索引：

MySQL 5.7及以下版本， GROUP BY 在某些条件下隐式排序。在 MySQL 8.0 中，这种情况不再发生，因此 ORDER BY NULL 不再需要在末尾指定抑制隐式排序。但是，查询结果可能与以前的 MySQL 版本不同。要生成给定的排序顺序，需要 ORDER BY 子句

1、 order by 后的字段使用索引，查询少量的数据，使得在内存中进行排序

2、增加 sort_buffer_size 变量值，结果集排序缓冲区

3、增加 read_rnd_buffer_size 变量值，以便一次读取多行

4、将 tmpdir 系统变量更改为指向具有大量可用空间的专用文件系统

参考：
https://dev.mysql.com/doc/refman/8.0/en/order-by-optimization.html

MySQL优化order by导致的 using filesort

using filesort 一般出现在 使用了 order by 语句当中。

using filesort不一定引起mysql的性能问题。但是如果查询次数非常多，那么每次在mysql中进行排序，还是会有影响的。

这里的优化方式是在order by 的字段建立索引，例如 语句：

SELECT * FROM yw_syjgb  ORDER BY result_date desc LIMIT 0,1000;

 查看执行计划：

+----+-------------+----------+------+---------------+------+---------+------+---------+----------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+----------+------+---------------+------+---------+------+---------+----------------+
| 1 | SIMPLE | yw_syjgb | ALL | NULL | NULL | NULL | NULL | 1312418 | Using filesort |
+----+-------------+----------+------+---------------+------+---------+------+---------+----------------+

则需要在result_date  建立索引：

此时查看执行计划：

+----+-------------+----------+-------+---------------+-------------+---------+------+------+-------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+----------+-------+---------------+-------------+---------+------+------+-------+
| 1 | SIMPLE | yw_syjgb | index | NULL | result_date | 6 | NULL | 1000 | NULL |
+----+-------------+----------+-------+---------------+-------------+---------+------+------+-------+

可以看到执行计划中使用索引后没有 Using filesort

需要注意的是：由于 Using filesort是使用算法在 内存中进行排序，MySQL对于排序的记录的大小也是有做限制：max_length_for_sort_data，默认为1024
show variables like ‘%max_length_for_sort_data%‘;

+--------------------------+-------+
| Variable_name | Value |
+--------------------------+-------+
| max_length_for_sort_data | 1024 |
+--------------------------+-------+
经过笔者测试，如果排序查询的数据两大于这个默认值的话，还是会使用Using filesort。

总结一句，当排序查询的数据量在默认值的范围内是，在排序的字段上加上索引可以提升MySQL查询的速度。

本文永久更新链接地址：http://www.linuxidc.com/Linux/2015-11/124881.htm