mysql:常用的优化手段
程序员文章站
2022-04-30 22:48:38
...
主要是:查找定位慢查询,并优化
优化方案:
- 创建索引:创建合适的索引,我们就可以先在索引中查询,查询到之后直接到对应的记录。
- 分表:当一张表的数据比较多或者一张表的某些字段的值比较多并且很少使用时,就采用水平分表和垂直分表优化。
- 读写分离:当一台服务器不能满足需求时,采用读写分离的方式进行集群。
- 缓存:使用redis来进行缓存
- 语句优化:比如少使用子查询而用join操作,少使用or多用IN,避免函数操作字段,避免模糊匹配,少用Order by排序
- 选择合适的存储引擎:Innodb(最常用)、Myisam、Memory
- 设计数据库所要遵循的范式:1NF,2NF,3NF和适度的反3NF(即可以适当的增加冗余字段)
接下来我们一个一个的说
如何查找定位慢查询
慢查询产生的原因
- 数据量上来,没有索引或未用到索引
- 单次查询过多数据
- 查询语句不好,需要根据实际业务做优化
开启慢查询
在mysql的my.ini文件,添加下面的内容:
slow_query_log= 1 //------>开启慢查询,默认是不开启,即设置为0的;
long_query_time= 1 //------>设置查询时间不能超过1秒(默认单位是秒)
slow_query_log_file=c:/slow.log //----->设置慢查询记录的文件的位置,这样就会把执行超过1秒的sql语句进行记录
慢查询分析工具Explain
具体字段含义网上一搜便知,在此不做细讲
优化举例
例1:like语法中查询不要用双%的方式,不会走索引
优化前:
explain select * from custom_signin_log where pcode like '%FPLN995%'
优化后:
explain select * from custom_signin_log where pcode like 'FPLN995%'
1. 创建索引
https://blog.csdn.net/weixin_43972437/article/details/104925609
2. 分表
2.1 水平分表
水平分表(按行数据进行分表):mysql数据一般达到百万级别,查询效率会很低,容易造成表锁,甚至堆积很多连接,直接挂掉,水平分表能够很大程序减少这些压力。
策略:
- 按时间分表:这种分表方式有一定的局限性,当数据有较强的实效性,如微博发送记录,微信消息。。。这种数据很少有用户会查询几个月前的数据,就可以按月进行分表;
- 按区间范围分表:一般在有严格的自增id需求上,通过一个原始目标的ID或者名称通过一定的hash算法计算出数据存储的表明,然后再访问相应的表;
- hash分表:(用得最多的)
2.2 垂直分表
垂直分表(按列分表):如果一张表中某个字段值非常多(长文本,二进制等),而且只有在很少的情况下被查询,这个时候就可以把多个字段单独放到一张表,通过外键关联起来;比如考试详情,一般只关注分数,不关注详情
3. 读写分离
当一台数据库无法满足过多的并发数据库访问的时候,就可以采取数据库的读写分离
两个核心问题:
- 主从同步:数据库最终会把数据持久化到磁盘,如果集群必须确保每个数据库服务器的数据是一致的,所以对能改变数据库数据的操作都在主数据库去操作,而其他的数据库从主数据库上同步数据
- 读写分离:使用负载均衡来实现写的操作都在主数据库,而读的操作都在从服务器。
4. 缓存
在持久层(DAO)和数据库(DB)直接添加一个缓存层,如果用户访问的数据已经被缓存起来时,在用户访问时直接从缓存中获取,不用访问数据库,而缓存是内存级别的,访问速度快。
java中常用的缓存有:hibernate二级缓存(不能解决分布式缓存);redis缓存;memcache缓存;
5. 语句优化
5.1 DDL优化
- 通过禁用索引俩提供导入数据性能,这个操作主要针对有数据的表
- 关闭唯一校验,set unique_checks=0 关闭 set unique_checks=1 开启
- 修改事务提交方式,set autocommit = 0 关闭 set autocommit = 1 开启批量导入
5.2 DML优化
- 多次提交变为一次提交
insert into test values (1, 2);
insert into test values (3, 4);
变为:
insert into test values (1, 2), (3, 4);
5.3 DQL优化
Order by优化----------多用索引排序
6. 存储引擎选择
https://blog.csdn.net/weixin_43972437/article/details/104919798
7. 三范式
https://blog.csdn.net/weixin_43972437/article/details/106613469