MySQL查询中LIMIT的大offset导致性能低下浅析
程序员文章站
2022-03-09 14:34:13
前言
我们大家都知道,mysql查询使用select命令,配合limit,offset参数可以读取指定范围的记录,但是offset过大影响查询性能的原因及优化方法...
前言
我们大家都知道,mysql查询使用select命令,配合limit,offset参数可以读取指定范围的记录,但是offset过大影响查询性能的原因及优化方法
我们在业务系统中难免少不了分页的需求。想到分页的时候,大家肯定会想到使用sql中的limit来实现。但是,如果不正确的使用limit会导致性能问题(sql执行得很慢、有可能会拖垮服务器),也会被领导批的;所以,我们来看看如何正确地使用limit。
下面话不多说了,来一起看看详细的介绍吧
limit offset, row_count 实现分页
存在性能问题的方式
select * from mytable order by `id` limit 1000000, 30
写出这样sql语句的人肯定心里是这样想的:mysql数据库会直接定位到符合条件的第1000000位,然后再取30条数据。
然而,实际上mysql不是这样工作的。
limit 1000000, 30 的意思是:扫描满足条件的1000030行,扔掉前面的1000000行,然后返回最后的30行。
较好的方式
select t.* from ( select id from mytable order by id limit 1000000, 30 ) q join mytable t on t.id = q.id
大概的原理是:
- 子查询只用到了索引列,没有取实际的数据,所以不涉及到磁盘io,所以即使是比较大的 offset,查询速度也不会太差。
对具体的原理分析感兴趣的朋友可以看看这篇文章:mysql order by / limit performance: late row lookups
后记
未完待续。
参考资料
- why does mysql higher limit offset slow the query down?
- mysql order by / limit performance: late row lookups
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对的支持。