- 浏览: 546409 次
- 性别:
- 来自: 杭州
文章分类
最新评论
-
wa114d:
楼主工作几年了,好厉害
一个面试官对面试问题的分析 -
wobuxiaole:
Good,非常好
30岁前男人需要完成的事 -
小逗逗:
Good,非常好
30岁前男人需要完成的事 -
invincibleLiu:
好帖,要顶!(别投我隐藏啊,这是对BBS最原始一种支持)
Java:synchronized修饰符在静态方法与非静态方法上的区别 -
fayedShih:
第三题,不知道对不对
import java.util.con ...
企业牛逼面试题目 高手进来讨论答题
用Explain分析SQL语句的时候,经常发现有的语句在Extra列会出现Using filesort,根据mysql官方文档对他的描述:
引用
MySQL must do an extra pass to find out how to retrieve the rows in sorted order. The sort is done by going through all rows according to the join type and storing the sort key and pointer to the row for all rows that match the WHERE clause.
中文手册上翻译的很别扭:
引用
“Mysql需要额外的一次传递,以找出如何按排序顺序检索行,通过根据联接类型浏览所有行并为 所有匹配where子句的行保存排序关键字和行的指针来完成排序,然后关键字被排序,并按排序顺序检索行。”
总的来说,Using filesort 是Mysql里一种速度比较慢的外部排序,如果能避免是最好的了,很多时候,我们可以通过优化索引来尽量避免出现Using filesort,从而提高速度。
这里举个简单的例子:
CREATE TABLE `testing` (
`id` int(10) unsigned NOT NULL auto_increment,
`room_number` int(10) unsigned NOT NULL default '0',
PRIMARY KEY (`id`),
KEY `room_number` (`room_number`)
) ENGINE=MyISAM DEFAULT CHARSET=latin1
写个存储过程askwan,插入10万条测试数据
mysql> DELIMITER $$
DROP PROCEDURE IF EXISTS `askwan`.`askwan` $$
CREATE PROCEDURE `askwan`.`askwan` ()
BEGIN
DECLARE v INT DEFAULT 1;
WHILE v<100000;
DO
INSERT INTO testing VALUES(v,v);
SET v=v+1;
END WHILE;
END $$
mysql> DELIMITER ;
mysql> CALL askwan();
Query OK, 1 row affected (13.21 sec)
OK,数据准备好了,开始试验。
由上面例子中建立的表信息,我已经建立了两个索引,一个主键id,一个 room_number列索引
那现在来看一条SQL,
SELECT id FROM testing WHERE room_number=1000 ORDER BY id ;
分析一下
mysql> EXPLAIN SELECT id FROM testing WHERE room_number=1000 ORDER BY id ;+----+-------------+---------+------+---------------+-------------+---------+-------+------+-----------------------------+| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |+----+-------------+---------+------+---------------+-------------+---------+-------+------+-----------------------------+| 1 | SIMPLE | testing | ref | room_number | room_number | 4 | const | 1 | Using where; Using filesort | +----+-------------+---------+------+---------------+-------------+---------+-------+------+-----------------------------+1 row in set (0.00 sec)
出现了Using filesort,并且用到了room_number这列索引,但是,在这里用到的索引是针对WHERE后面的room_number条件的,而最后面的 排序是根据id来的,这就是手册中说的,“额外的一次排序”!,于是就会出现Using filesort,根据我以前写过的一文章,我再建立一个联合索引 room_number_id
alter table testing add index room_number_id(room_number,id);
在来分析一下
mysql> EXPLAIN SELECT id FROM testing WHERE room_number=1000 ORDER BY id ;+----+-------------+---------+------+----------------------------+----------------+---------+-------+------+--------------------------+| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |+----+-------------+---------+------+----------------------------+----------------+---------+-------+------+--------------------------+| 1 | SIMPLE | testing | ref | room_number,room_number_id | room_number_id | 4 | const | 1 | Using where; | +----+-------------+---------+------+----------------------------+----------------+---------+-------+------+--------------------------+1 row in set (0.00 sec)
现在Using filesort不见了。
总结一下:
1.一般有order by语句,在索引加得不当的情况下,都有可能出现Using filesort,这时候就要对SQL语句和索引进行优化了,但是,并不是说出现Using filesort就是个严重的问题,不是这样的,此次举的例子比较极端,几乎不太可能出现这么傻瓜的查询,优化和不优化,要看它是不是影响了业务性能。
2. 从上面可以看到联合索引,也可以叫多列索引,形如 key ('A1','A2','A3' ,'A4')等的,排序的思路一般是,先按照A1来排序,A1相同,然后按照A2排序,以此类推,这样对于(A1),(A1,A2), (A1,A2,A3)的索引都是有效的,但是对于(A2,A3)这样的索引就无效了。
++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
Mysql之EXPLAIN显示using filesort
关键字: mysql using filesort
EXPLAIN 是mysql解释select查询的一个关键字,可以很方便的用于调试
语法格式如下
EXPLAIN tbl_name
或者:
EXPLAIN SELECT select_options
EXPLAIN 语句可以被当作 DESCRIBE 的同义词来用,也可以用来获取一个MySQL要执行的 SELECT 语句的相关信息。
EXPLAIN tbl_name 语法和 DESCRIBE tbl_name 或 SHOW COLUMNS FROM tbl_name 一样。
当在一个 SELECT 语句前使用关键字 EXPLAIN 时,MYSQL会解释了即将如何运行该 SELECT 语句,它显示了表如何连接、连接的顺序等信息。
以下信息为引用:
在explain我们所使用的sql的时候,经常会遇到using filesort这种情况,原以为是由于有相同列值的原因引起,结果昨天看到公司的一个sql,跟同事讨论了下加上自己又做了一些测试,突然发现自己原来 的想法是错误的。
首先,只有在order by 数据列的时候才可能会出现using filesort,而且如果你不对进行order by的这一列设置索引的话,无论列值是否有相同的都会出现using filesort。因此,只要用到order by 的这一列都应该为其建立一个索引。
其次,在这次测试中,使用了一个稍微有点复杂的例子来说明这个问题,下面详细用这个例子说一下:
SELECT * FROM DB.TB WHERE ID=2222 AND FID IN (9,8,3,13,38,40) ORDER BY INVERSE_DATE LIMIT 0, 5
里面建立的索引为一个三列的多列索引:IDX(ID,FID ,INVERSE_DATE) 。INVERSE_DATE这个是时间的反向索引。
对于这个sql我当时最开始认为应该是个优化好的状态,应该没有什么纰漏了,结果一explain才发现竟然出现了:Using where; Using filesort。
为什么呢,后来经过分析才得知,原来在多列索引在建立的时候是以B-树结构建立的,因此建立索引的时候是先建立ID的按顺序排的索引,在相同ID的 情况下建立FID按 顺序排的索引,最后在FID 相同的情况下建立按INVERSE_DATE顺序排的索引,如果列数更多以此类推。有了这个理论依据我们可以看出在这个sql使用这个IDX索引的时候只 是用在了order by之前,order by INVERSE_DATE 实际上是using filesort出来的。。汗死了。。因此如果我们要在优化一下这个sql就应该为它建立另一个索引IDX(ID,INVERSE_DATE),这样就消 除了using filesort速度也会快很多。问题终于解决了。
引用
MySQL must do an extra pass to find out how to retrieve the rows in sorted order. The sort is done by going through all rows according to the join type and storing the sort key and pointer to the row for all rows that match the WHERE clause.
中文手册上翻译的很别扭:
引用
“Mysql需要额外的一次传递,以找出如何按排序顺序检索行,通过根据联接类型浏览所有行并为 所有匹配where子句的行保存排序关键字和行的指针来完成排序,然后关键字被排序,并按排序顺序检索行。”
总的来说,Using filesort 是Mysql里一种速度比较慢的外部排序,如果能避免是最好的了,很多时候,我们可以通过优化索引来尽量避免出现Using filesort,从而提高速度。
这里举个简单的例子:
CREATE TABLE `testing` (
`id` int(10) unsigned NOT NULL auto_increment,
`room_number` int(10) unsigned NOT NULL default '0',
PRIMARY KEY (`id`),
KEY `room_number` (`room_number`)
) ENGINE=MyISAM DEFAULT CHARSET=latin1
写个存储过程askwan,插入10万条测试数据
mysql> DELIMITER $$
DROP PROCEDURE IF EXISTS `askwan`.`askwan` $$
CREATE PROCEDURE `askwan`.`askwan` ()
BEGIN
DECLARE v INT DEFAULT 1;
WHILE v<100000;
DO
INSERT INTO testing VALUES(v,v);
SET v=v+1;
END WHILE;
END $$
mysql> DELIMITER ;
mysql> CALL askwan();
Query OK, 1 row affected (13.21 sec)
OK,数据准备好了,开始试验。
由上面例子中建立的表信息,我已经建立了两个索引,一个主键id,一个 room_number列索引
那现在来看一条SQL,
SELECT id FROM testing WHERE room_number=1000 ORDER BY id ;
分析一下
mysql> EXPLAIN SELECT id FROM testing WHERE room_number=1000 ORDER BY id ;+----+-------------+---------+------+---------------+-------------+---------+-------+------+-----------------------------+| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |+----+-------------+---------+------+---------------+-------------+---------+-------+------+-----------------------------+| 1 | SIMPLE | testing | ref | room_number | room_number | 4 | const | 1 | Using where; Using filesort | +----+-------------+---------+------+---------------+-------------+---------+-------+------+-----------------------------+1 row in set (0.00 sec)
出现了Using filesort,并且用到了room_number这列索引,但是,在这里用到的索引是针对WHERE后面的room_number条件的,而最后面的 排序是根据id来的,这就是手册中说的,“额外的一次排序”!,于是就会出现Using filesort,根据我以前写过的一文章,我再建立一个联合索引 room_number_id
alter table testing add index room_number_id(room_number,id);
在来分析一下
mysql> EXPLAIN SELECT id FROM testing WHERE room_number=1000 ORDER BY id ;+----+-------------+---------+------+----------------------------+----------------+---------+-------+------+--------------------------+| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |+----+-------------+---------+------+----------------------------+----------------+---------+-------+------+--------------------------+| 1 | SIMPLE | testing | ref | room_number,room_number_id | room_number_id | 4 | const | 1 | Using where; | +----+-------------+---------+------+----------------------------+----------------+---------+-------+------+--------------------------+1 row in set (0.00 sec)
现在Using filesort不见了。
总结一下:
1.一般有order by语句,在索引加得不当的情况下,都有可能出现Using filesort,这时候就要对SQL语句和索引进行优化了,但是,并不是说出现Using filesort就是个严重的问题,不是这样的,此次举的例子比较极端,几乎不太可能出现这么傻瓜的查询,优化和不优化,要看它是不是影响了业务性能。
2. 从上面可以看到联合索引,也可以叫多列索引,形如 key ('A1','A2','A3' ,'A4')等的,排序的思路一般是,先按照A1来排序,A1相同,然后按照A2排序,以此类推,这样对于(A1),(A1,A2), (A1,A2,A3)的索引都是有效的,但是对于(A2,A3)这样的索引就无效了。
++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
Mysql之EXPLAIN显示using filesort
关键字: mysql using filesort
EXPLAIN 是mysql解释select查询的一个关键字,可以很方便的用于调试
语法格式如下
EXPLAIN tbl_name
或者:
EXPLAIN SELECT select_options
EXPLAIN 语句可以被当作 DESCRIBE 的同义词来用,也可以用来获取一个MySQL要执行的 SELECT 语句的相关信息。
EXPLAIN tbl_name 语法和 DESCRIBE tbl_name 或 SHOW COLUMNS FROM tbl_name 一样。
当在一个 SELECT 语句前使用关键字 EXPLAIN 时,MYSQL会解释了即将如何运行该 SELECT 语句,它显示了表如何连接、连接的顺序等信息。
以下信息为引用:
在explain我们所使用的sql的时候,经常会遇到using filesort这种情况,原以为是由于有相同列值的原因引起,结果昨天看到公司的一个sql,跟同事讨论了下加上自己又做了一些测试,突然发现自己原来 的想法是错误的。
首先,只有在order by 数据列的时候才可能会出现using filesort,而且如果你不对进行order by的这一列设置索引的话,无论列值是否有相同的都会出现using filesort。因此,只要用到order by 的这一列都应该为其建立一个索引。
其次,在这次测试中,使用了一个稍微有点复杂的例子来说明这个问题,下面详细用这个例子说一下:
SELECT * FROM DB.TB WHERE ID=2222 AND FID IN (9,8,3,13,38,40) ORDER BY INVERSE_DATE LIMIT 0, 5
里面建立的索引为一个三列的多列索引:IDX(ID,FID ,INVERSE_DATE) 。INVERSE_DATE这个是时间的反向索引。
对于这个sql我当时最开始认为应该是个优化好的状态,应该没有什么纰漏了,结果一explain才发现竟然出现了:Using where; Using filesort。
为什么呢,后来经过分析才得知,原来在多列索引在建立的时候是以B-树结构建立的,因此建立索引的时候是先建立ID的按顺序排的索引,在相同ID的 情况下建立FID按 顺序排的索引,最后在FID 相同的情况下建立按INVERSE_DATE顺序排的索引,如果列数更多以此类推。有了这个理论依据我们可以看出在这个sql使用这个IDX索引的时候只 是用在了order by之前,order by INVERSE_DATE 实际上是using filesort出来的。。汗死了。。因此如果我们要在优化一下这个sql就应该为它建立另一个索引IDX(ID,INVERSE_DATE),这样就消 除了using filesort速度也会快很多。问题终于解决了。
发表评论
-
MySQL的sql查询语句优化
2017-02-24 13:51 577mysql中优化sql语句查询的30种方法: 1.对查询进行优 ... -
SQL 中having 和where的区别
2011-12-20 13:56 1263group by 在selec ... -
通过force index了解的MySQL查询的性能优化
2011-07-14 15:46 8558查询是数据库技术中最常用的操作。查询操作的过程比较简单,首先从 ... -
数据库索引优缺点
2011-07-06 22:01 980创建索引可以大大提高 ... -
如何用IN、LIMIT、CONCAT、DISTINCT等MySQL关键字
2011-06-14 11:11 2098记录一些select的技巧: 1、select语句可以用回车 ... -
MySQL复制表结构和数据的SQL语句
2011-03-31 10:53 34901. 复制表结构及数据到新表 ... -
简单sql语句整理
2011-03-31 10:34 1022-- 基本查询 select * from pet - ... -
SQL优化大全
2011-03-31 10:05 1114目录:概要 优化的理由 1. 大小写对SQL语句的影响(ORA ... -
mysql grant all privileges on
2011-03-28 16:34 2180遇到了 SQLException: access ... -
sql语句如何忽略大小写?
2011-02-21 10:36 3408那是自然查询不出来结果的,sql不区分大小写是针对语法来说的, ... -
公开一个Mysql如何获得新插入Id的代码
2010-12-02 10:57 1136原理: 在Mysql中同一个连接执行了insert语句 ... -
mysql show processlist命令 详解
2010-11-03 13:37 1498processlist命令的输出结果显示了有哪些线程在运行,可 ... -
论MySQL的监控和调优
2010-11-03 12:48 1514论MySQL的监控和调优 懂 ... -
mysql-性能,命令-explain,show processlist,show
2010-11-03 11:17 1638mysql-性能监控和调优 mysql-优化 sho ... -
MySQL全文搜索
2010-09-07 19:51 1008MySQL全文搜索,阅读MySQL全文搜索,全文索引在 MyS ... -
Apache common-pool, common-dbcp源码解读与对象池原理剖析
2010-03-29 18:25 2417Apache的commons-pool提供 ... -
dbcp 学习笔记
2010-03-29 15:06 1899/* * Licensed to the Apache S ...
相关推荐
- **覆盖索引**:如果`SELECT`的列完全由索引提供,MySQL可以直接从索引中获取数据,无需回表,从而避免`Using filesort`。 - **调整索引**:根据查询需求创建合适的复合索引,确保`ORDER BY`的列在索引的前面。 ...
这样,当执行`ORDER BY INVERSE_DATE`时,MySQL就可以直接使用索引进行排序,从而避免`Using filesort`。 优化SQL查询时,我们需要关注以下几点: 1. **避免全表扫描**:尽量让MySQL能使用索引来定位数据,而不是...
MySQL索引优化是数据库性能提升的关键之一。在深入理解索引优化的过程中,我们需要关注几个核心概念,如索引类型、键长度(key_len)、参考值(ref)以及全表扫描(type=ALL)和文件排序(Using filesort)。 首先...
【MySQL索引优化详解】 MySQL索引优化是提升数据库性能的关键环节,通过合理设计和使用索引,可以显著加快查询速度,减少数据访问的时间。在MySQL中,索引是一种特殊的数据结构,允许数据库快速找到存储在表中的...
注意`Extra`列中的`Using filesort`和`Using temporary table`,这些表明了MySQL需要额外的资源进行排序或创建临时表,可能是优化的焦点。 3. **索引优化** - 选择合适的列建立索引:考虑选择具有高选择性的列,即...
5. using filesort:当无法利用索引排序时,解释(explain)查询计划会显示“using filesort”,表示进行了手工排序。 关于group by分组优化,其优化原理与order by相似。group by语句通常用于分组统计,例如按照...
通过对`EXPLAIN`输出的分析,我们可以识别出可能导致低效的查询,如全表扫描(`type`为ALL)、未使用索引(`key`为NULL)或不必要的排序(`Extra`中有Using filesort),并据此优化查询语句或调整索引策略。 总的来说,...
MySQL 优化是一个涵盖广泛的主题,涉及数据库架构设计、SQL 查询优化、索引策略以及系统配置等多个方面。在本文中,我们将重点关注两个关键的工具:MySQL 的慢查询日志(Slow Query Log)及其分析工具 `...
`Extra`列中的信息非常重要,例如`Using where`表示WHERE条件用于索引,而`Using filesort`则表示数据必须进行额外的排序操作,这通常会导致性能下降。 通过分析`EXPLAIN`的结果,你可以发现是否正确利用了索引,...
- `Extra`:包含额外的信息,如`Using filesort`表示需要使用临时文件进行排序,这通常表明查询性能不佳。 3. **复合索引与单个索引的区别**: - 复合索引是由多个字段组成的索引,例如`ALTER TABLE user ADD ...
- `Extra`:提供有关查询执行的附加信息,如`Using where`、`Using index`等,`Using filesort`表示MySQL需要进行额外的排序步骤,这通常是需要优化的地方。 在优化查询时,关注`type`列尤为关键。如果查询类型是`...
MySQL 查询优化的百科全书 —— Explain 详解 MySQL 是怎样运行的?从根儿上理解 MySQL 的查询优化是一件复杂的事情,但了解 Explain 语句输出的各个列的意思是非常重要的。本章将继续唠叨 Explain 语句输出的各个...
然而,未对表添加任何额外索引时,查询性能低下,因为MySQL进行了全表扫描(type=ALL)并进行了外部排序(Using filesort)。 为解决这个问题,我们尝试创建了一个复合索引`idx_ccv`,包含`category_id`、`comments...
- 使用EXPLAIN查看查询计划,注意Extra字段中的Using Filesort和Using Temporary,尽量避免这些情况,它们可能导致额外的磁盘操作和性能下降。 - 联合索引的创建需考虑字段的查询频率和范围,只有包含等于操作的...
总之,理解`ORDER BY`和`GROUP BY`的索引优化策略,以及如何通过`EXPLAIN`分析查询计划,可以帮助我们有效地优化查询,避免不必要的`filesort`操作,从而提升MySQL数据库的性能。在设计索引时,应考虑查询语句的常见...
本文通过实例分析了MySQL索引对排序速度的影响,强调了合理设计索引对于优化数据库性能的重要性。 首先,索引的基本作用是加速数据查找。在数据库中,索引就像书的目录,使得数据的检索过程不再需要逐行扫描整个表...
- 使用`EXPLAIN`命令分析查询计划,查看是否有效使用了索引,以及是否出现`using filesort`,这通常意味着MySQL需要额外的步骤进行排序。 - 避免在`SELECT`列表中无意义地创建索引,例如在上述例子中,对`id`、`...