mysql查询优化详细教程

1.目标

l了解什么是优化

l掌握优化查询的方法

l掌握优化结构的方法

l掌握优化mysql服务器的方法

2.什么是优化？

l合理安排资源、调整参数使mysql运行更快、更节省资源。

l优化是多方面的，包括查询、更新、服务器等。

l原则：减少系统瓶颈，减少资源占用，增加系统的反应速度。

3.数据库性能参数

l使用show status语句查看mysql数据库的性能参数

show status like 'value‘

l常用的参数：

slow_queries 慢查询次数

com_(crud) 操作的次数

uptime 上线时间

4.查询优化

4.1.explain

在mysql中可以使用explain查看sql执行计划，用法：explain select * from tb_item

4.2.结果说明

4.2.1.id

select识别符。这是select查询序列号。这个不重要。

4.2.2.select_type

表示select语句的类型。

有以下几种值：

1、simple

表示简单查询，其中不包含连接查询和子查询。

2、primary

表示主查询，或者是最外面的查询语句。

3、union

表示连接查询的第2个或后面的查询语句。

4、dependent union

union中的第二个或后面的select语句，取决于外面的查询。

5、union result

连接查询的结果。

6、subquery

子查询中的第1个select语句。

7、dependent subquery

子查询中的第1个select语句，取决于外面的查询。

8、derived

select(from 子句的子查询)。

4.2.3.table

表示查询的表。

4.2.4.type（重要）

表示表的连接类型。

以下的连接类型的顺序是从最佳类型到最差类型：

1、system

表仅有一行，这是const类型的特列，平时不会出现，这个也可以忽略不计。

2、const

数据表最多只有一个匹配行，因为只匹配一行数据，所以很快，常用于primary key或者unique索引的查询，可理解为const是最优化的。

3、eq_ref

mysql手册是这样说的:"对于每个来自于前面的表的行组合，从该表中读取一行。这可能是最好的联接类型，除了const类型。它用在一个索引的所有部分被联接使用并且索引是unique或primary key"。eq_ref可以用于使用=比较带索引的列。

4、ref

查询条件索引既不是unique也不是primary key的情况。ref可用于= 操作符的带索引的列。

5、ref_or_null

该联接类型如同ref，但是添加了mysql可以专门搜索包含null值的行。在解决子查询中经常使用该联接类型的优化。

上面这五种情况都是很理想的索引使用情况。

6、index_merge

该联接类型表示使用了索引合并优化方法。在这种情况下，key列包含了使用的索引的清单，key_len包含了使用的索引的最长的关键元素。

7、unique_subquery

该类型替换了下面形式的in子查询的ref: value in (select primary_key from single_table where some_expr)

unique_subquery是一个索引查找函数,可以完全替换子查询,效率更高。

8、index_subquery

该联接类型类似于unique_subquery。可以替换in子查询,但只适合下列形式的子查询中的非唯一索引: value in (select key_column from single_table where some_expr)

9、range

只检索给定范围的行,使用一个索引来选择行。

10、index

该联接类型与all相同,除了只有索引树被扫描。这通常比all快,因为索引文件通常比数据文件小。

11、all

对于每个来自于先前的表的行组合,进行完整的表扫描。（性能最差）

4.2.5.possible_keys

指出mysql能使用哪个索引在该表中找到行。

如果该列为null，说明没有使用索引，可以对该列创建索引来提高性能。

4.2.6.key

显示mysql实际决定使用的键(索引)。如果没有选择索引,键是null。

可以强制使用索引或者忽略索引：

4.2.7.key_len

显示mysql决定使用的键长度。如果键是null,则长度为null。

注意：key_len是确定了mysql将实际使用的索引长度。

4.2.8.ref

显示使用哪个列或常数与key一起从表中选择行。

4.2.9.rows

显示mysql认为它执行查询时必须检查的行数。

4.2.10.extra

该列包含mysql解决查询的详细信息

·distinct:mysql发现第1个匹配行后,停止为当前的行组合搜索更多的行。

·not exists:mysql能够对查询进行left join优化,发现1个匹配left join标准的行后,不再为前面的的行组合在该表内检查更多的行。

·range checked for each record (index map: #):mysql没有发现好的可以使用的索引,但发现如果来自前面的表的列值已知,可能部分索引可以使用。

·using filesort:mysql需要额外的一次传递,以找出如何按排序顺序检索行。

·using index:从只使用索引树中的信息而不需要进一步搜索读取实际的行来检索表中的列信息。

·using temporary:为了解决查询,mysql需要创建一个临时表来容纳结果。

·using where:where 子句用于限制哪一个行匹配下一个表或发送到客户。

·using sort_union(...), using union(...), using intersect(...):这些函数说明如何为index_merge联接类型合并索引扫描。

·using index for group-by:类似于访问表的using index方式,using index for group-by表示mysql发现了一个索引,可以用来查 询group by或distinct查询的所有列,而不要额外搜索硬盘访问实际的表。

4.3.使用索引查询需要注意

索引可以提供查询的速度，但并不是使用了带有索引的字段查询都会生效，有些情况下是不生效的，需要注意！

4.3.1.使用like关键字的查询

在使用like关键字进行查询的查询语句中，如果匹配字符串的第一个字符为“%”，索引不起作用。只有“%”不在第一个位置，索引才会生效。

4.3.2.使用联合索引的查询

mysql可以为多个字段创建索引，一个索引可以包括16个字段。对于联合索引，只有查询条件中使用了这些字段中第一个字段时，索引才会生效。

4.3.3.使用or关键字的查询

查询语句的查询条件中只有or关键字，且or前后的两个条件中的列都是索引时，索引才会生效，否则，索引不生效。

4.4.子查询优化

mysql从4.1版本开始支持子查询，使用子查询进行select语句嵌套查询，可以一次完成很多逻辑上需要多个步骤才能完成的sql操作。

子查询虽然很灵活，但是执行效率并不高。

执行子查询时，mysql需要创建临时表，查询完毕后再删除这些临时表，所以，子查询的速度会受到一定的影响。

优化：

可以使用连接查询（join）代替子查询，连接查询时不需要建立临时表，其速度比子查询快。

多条件查询

把 限制范围最小的 放到最后

where a=1 and b = 2

5.数据库结构优化

一个好的方案对于数据库的性能往往会起到事半功倍的效果。

需要考虑数据冗余、查询和更新的速度、字段的数据类型是否合理等多方面的内容。

5.1.将字段很多的表分解成多个表

对于字段较多的表，如果有些字段的使用频率很低，可以将这些字段分离出来形成新表。

因为当一个表的数据量很大时，会由于使用频率低的字段的存在而变慢。

5.2.增加中间表

对于需要经常联合查询的表，可以建立中间表以提高查询效率。

通过建立中间表，将需要通过联合查询的数据插入到中间表中，然后将原来的联合查询改为对中间表的查询。

5.3.增加冗余字段

设计数据表时应尽量遵循范式理论的规约，尽可能的减少冗余字段，让数据库设计看起来精致、优雅。

但是，合理的加入冗余字段可以提高查询速度。

表的规范化程度越高，表和表之间的关系越多，需要连接查询的情况也就越多，性能也就越差。

注意：

冗余字段的值在一个表中修改了，就要想办法在其他表中更新，否则就会导致数据不一致的问题。

6.插入数据的优化

插入数据时，影响插入速度的主要是索引、唯一性校验、一次插入的数据条数等。

插入数据的优化，不同的存储引擎优化手段不一样，在mysql中常用的存储引擎有，myisam和innodb，两者的区别：

6.1.myisam

6.1.1.禁用索引

对于非空表，插入记录时，mysql会根据表的索引对插入的记录建立索引。如果插入大量数据，建立索引会降低插入数据速度。

为了解决这个问题，可以在批量插入数据之前禁用索引，数据插入完成后再开启索引。

禁用索引的语句：

alter table table_name disable keys

开启索引语句：

alter table table_name enable keys

对于空表批量插入数据，则不需要进行操作，因为myisam引擎的表是在导入数据后才建立索引。

6.1.2.禁用唯一性检查

唯一性校验会降低插入记录的速度，可以在插入记录之前禁用唯一性检查，插入数据完成后再开启。

禁用唯一性检查的语句：set unique_checks = 0;

开启唯一性检查的语句：set unique_checks = 1;

6.1.3.批量插入数据

插入数据时，可以使用一条insert语句插入一条数据，也可以插入多条数据。

第二种方式的插入速度比第一种方式快。

6.1.4.使用loaddata infile

当需要批量导入数据时，使用loaddata infile语句比insert语句插入速度快很多。

6.2.innodb

6.2.1.禁用唯一性检查

用法和myisam一样。

6.2.2.禁用外键检查

插入数据之前执行禁止对外键的检查，数据插入完成后再恢复，可以提供插入速度。

禁用：set foreign_key_checks = 0;

开启：set foreign_key_checks = 1;

6.2.3.禁止自动提交

插入数据之前执行禁止事务的自动提交，数据插入完成后再恢复，可以提高插入速度。

禁用：set autocommit = 0;

开启：set autocommit = 1;

7.服务器优化

7.1.优化服务器硬件

服务器的硬件性能直接决定着mysql数据库的性能，硬件的性能瓶颈，直接决定mysql数据库的运行速度和效率。

需要从以下几个方面考虑：

1、配置较大的内存。足够大的内存，是提高mysql数据库性能的方法之一。内存的io比硬盘快的多，可以增加系统的缓冲区容量，使数据在内存停留的时间更长，以减少磁盘的io。

2、配置高速磁盘，比如ssd。

3、合理分配磁盘io，把磁盘io分散到多个设备上，以减少资源的竞争，提高并行操作能力。

4、配置多核处理器，mysql是多线程的数据库，多处理器可以提高同时执行多个线程的能力。

7.2.优化mysql的参数

通过优化mysql的参数可以提高资源利用率，从而达到提高mysql服务器性能的目的。

mysql的配置参数都在my.conf或者my.ini文件的[mysqld]组中，常用的参数如下：