MySQL 联合索引与Where子句的优化 提高数据库运行效率
程序员文章站
2023-12-20 22:38:10
网站系统上线至今，数据量已经不知不觉上到500m，近8w记录了。涉及数据库操作的基本都是变得很慢了，用的人都会觉得躁火~~然后把这个情况在群里一贴，包括机器配置什么的一说，...
网站系统上线至今，数据量已经不知不觉上到500m，近8w记录了。涉及数据库操作的基本都是变得很慢了，用的人都会觉得躁火~~然后把这个情况在群里一贴，包括机器配置什么的一说，马上就有群友发话了，而且帮我确定了不是机器配置的问题，“深圳-枪手”热心人他的机器512内存过百w的数据里也跑得飞快，甚至跟那些几w块的机器一样牛(吹过头了)，呵呵~~~
在群友的分析指点下，尝试把排序、条件等一个一个去除来做测试，结果发现问题就出在排序部分，去除排序的时候，执行时间由原来的48秒变成0.3x秒，这是个什么档次的变化呀~~看着这个结果我激动ing.....
于是我把涉及排序的字段组成一个联合索引alter table xx add index indexname(x1,x2,x3)，经过2分钟创建新索引之后再执行同一个sql语句，哇塞0.28s。。。。爽
于是按照同样的思路把其它几个常用的sql作了过些优化，效果马上见效
过了30分钟再查slow sql记录文件，不好了，发现原来一个好好的sql变得灰常慢了，神马情况?
几经分析和测试原来就是因为添加了联合索引的原因，而且这个sql语句当中有个or，当把这个or改用union之后问题排除。
这回又得出一个心得：写sql的时候千万别一时就手，随便写个就ok，那会为以为带来很严重的后果。
再附上一段关于where子句的执行顺序：
在用mysql查询数据库的时候，连接了很多个用，发现非常慢。例如：
select ... where p.languages_id = 1 and m.languages_id = 1 and c.languages_id = 1 and t.languages_id = 1 and p.products_id in (472,474)
这样查询需要20多秒，虽然在各个字段上都建立了索引。用分析explain sql一分析，发现在第一次分析过程中就返回了几万条数据：
where p.languages_id = 1 ，然后再依次根据条件，缩小范围。
而我改变一下where 字段的位置之后，速度就有了明显地提高：
where p.products_id in (472,474) and p.languages_id = 1 and m.languages_id = 1 and c.languages_id = 1 and t.languages_id = 1
这样，第一次的条件是p.products_id in (472,474)，它返回的结果只有不到10条，接下来还要根据其它的条件来过滤，自然在速度上有了较大的提升。
经过实践发现，不要以为where中的字段顺序无所谓，可以随便放在哪，应该尽可能地第一次就过滤掉大部分无用的数据，只返回最小范围的数据。
希望能帮到有同样遭遇的朋友。
在群友的分析指点下，尝试把排序、条件等一个一个去除来做测试，结果发现问题就出在排序部分，去除排序的时候，执行时间由原来的48秒变成0.3x秒，这是个什么档次的变化呀~~看着这个结果我激动ing.....
于是我把涉及排序的字段组成一个联合索引alter table xx add index indexname(x1,x2,x3)，经过2分钟创建新索引之后再执行同一个sql语句，哇塞0.28s。。。。爽
于是按照同样的思路把其它几个常用的sql作了过些优化，效果马上见效
过了30分钟再查slow sql记录文件，不好了，发现原来一个好好的sql变得灰常慢了，神马情况?
几经分析和测试原来就是因为添加了联合索引的原因，而且这个sql语句当中有个or，当把这个or改用union之后问题排除。
这回又得出一个心得：写sql的时候千万别一时就手，随便写个就ok，那会为以为带来很严重的后果。
再附上一段关于where子句的执行顺序：
在用mysql查询数据库的时候，连接了很多个用，发现非常慢。例如：
select ... where p.languages_id = 1 and m.languages_id = 1 and c.languages_id = 1 and t.languages_id = 1 and p.products_id in (472,474)
这样查询需要20多秒，虽然在各个字段上都建立了索引。用分析explain sql一分析，发现在第一次分析过程中就返回了几万条数据：
where p.languages_id = 1 ，然后再依次根据条件，缩小范围。
而我改变一下where 字段的位置之后，速度就有了明显地提高：
where p.products_id in (472,474) and p.languages_id = 1 and m.languages_id = 1 and c.languages_id = 1 and t.languages_id = 1
这样，第一次的条件是p.products_id in (472,474)，它返回的结果只有不到10条，接下来还要根据其它的条件来过滤，自然在速度上有了较大的提升。
经过实践发现，不要以为where中的字段顺序无所谓，可以随便放在哪，应该尽可能地第一次就过滤掉大部分无用的数据，只返回最小范围的数据。
希望能帮到有同样遭遇的朋友。