MySQL的常见存储引擎介绍与参数设置调优

mysql常用存储引擎之myisam

特性：
1、并发性与锁级别
2、表损坏修复
check table tablename
repair table tablename
3、myisam表支持的索引类型
①、全文索引
②、前缀索引
4、myisam表支持数据压缩
myisampack
限制：
版本 < mysql5.0时默认表大小为4g
如存储达标则要修改max_rows和avg_row_length
版本 > mysql5.0时默认支持为256tb

适用场景：
1、非事务形应用
2、只读类应用
3、空间类应用

mysql常用存储引擎之innodb

innodb存储引擎的特征
1、innodb是一种事务性存储引擎
2、完全支持事务的acid特性
3、redo log 和 undo log
4、innodb支持行级锁

innodb使用表空间进行 数据存储
为每个表独立创建一个表空间存储
innodb_file_per_table
on:独立表空间:tablename.ibd
off:系统表空间:ibdatax（x是个数字，从1开始的数字）

系统表空间和独立表空间要如何选择
比较：
系统表空间无法捡的收缩文件大小
独立表空格键可以通过optimize table命令收缩系统文件
系统表空间会产生io瓶颈
独立表空间可以同时向多个文件刷新数据

表转移的步骤
步骤：
1、使用mysqldump到处所有数据库表数据
2、停止mysql服务，修改参数，并删除innodb相关文件
3、重启mysql服务，重建innodb系统表空间
4、重新导入数据

mysql常见的存储引擎之csv

文件系统存储特点
1、数据以文本方式存储在文本中
2、.csv文件存储表内容
3、.csm文件存储表的元数据如表状态和数据量
4、.frm文件存储表结构信息
5、以csv格式进行存储
6、所有列必须都是不能为null的
7、不支持索引

适用场景：
适用作为数据交换的中间表(电子表格->csv文件->mysql数据库目录)

mysql常用存储引擎之archive

文件系统存储特点

1、以zlib对表数据进行压缩,磁盘i/o更少
2、数据存储在arz为后缀的文件中

archive存储引擎的特点
1、只支持insert和select操作
2、只允许在自增的id列上加索引

适用场景：
日志和数据采集类应用

mysql常用存储引擎之memory

文件系统存储特点
1、也成heap存储引擎，所以数据保存在内存中

功能特点：
1、支持hash索引和btree索引
2、所有字段都有固定长度varchar(10)=char(10)
3、不支持blog和text等大字段
4、memory存储引擎使用表级锁
5、最大大小由max_heap_table_size参数决定

适用场景：
1、用于查找或者是映射表，例如邮编和地区的对应表
2、用于保存数据分心中产生的中间表
3、用于缓存周期性聚合数据的结果表

mysql常用存储引擎之federated

特点：
1、提供了访问远程mysql服务器上表的方法
2、本地不存储数据，数据全部放到远程服务器上
3、本地需要保存表结构和远程服务器的连接信息

如何使用
默认静止，启用需要在启动时增加federated参数
mysql://user_name[:password]@host_name[:port]/db_name/table_name

适用场景：
偶尔的统计分析及手工查询

如何选择正确的存储引擎

参考条件
1、是否要支持事务
2、定期备份
3、崩溃恢复
4、存储引擎的特有特性

mysql的服务器参数介绍

mysql获取配置信息路径

1、命令行参数

mysqld_safe --datadir=/data/sql_data

2、配置文件

查看配置文件的命令：
[root@localhost ~]# mysqld --help --verbose | egrep -a 1 'default options'
配置文件的有效路径
/etc/my.cnf /etc/mysql/my.cnf /usr/etc/my.cnf ~/.my.cnf

mysql配置参数的作用域

1、全局参数
set global 参数名=参数值;
set @@global.参数名:=参数值;
2、会话参数
set [session] 参数名=参数值;
set @@session.参数名:=参数值;

内存配置相关参数
1、确定可以使用的内存的上限
2、确定mysql的每个连接使用的内存
sort_buffer_size
join_buffer_size
read_buffer_size
read_rnd_buffer_size
3、确定需要为操作系统保留多少内存
4、如何为缓存池分配内存
innodb_buffer_pool_size
注：设置缓存池的大小的考量标准为:总内存-(每个编程所以需要的内存*连接数)-系统保留内存
key_buffer_size
select sum(index_length) from information_schema.tables where engines='myisam'

i/o相关配置参数
innodo i/o相关配置
innodb_log_file_size 单个事务日志的大小
innodb_log_files_in_group 控制文件日子的个数
事务日志总大小 = innodb_log_files_in_group * innodb_log_file_size
innodb_log_buffer_size = (32m or 128m)
innodb_flush_log_at_trx_commint
0:每秒进行一次log写入cache,并flush log到磁盘
1[默认]:在每次事务提交执行log写入cache，并flush log到磁盘
2[建议]:每次事务提交，执行log数据写入到cache中，每秒执行一次flush log到磁盘
innodb_flush_method=o_direct
innodb_file_per_table = 1
innodb_doublewrite = 1

myisam i/o相关配置
delay_key_write
off:每次写操作后刷新键缓冲中的脏块到磁盘
on:只对在键表时指定了delay_key_write选项的表使用延迟刷新
all:对所有的myisam表都使用延迟建写入

安全相关配置参数
expire_logs_days 指定自动清理binlog的天数
max_allowed_packet 控制mysql可以连接的包大小，建议设置为32m，如果使用了主从复制，参数应该设置成一致的
skip_name_resolve 禁用dns查找
sysdate_is_now 确保sysdate()返回确保性日期
read_only 禁止非super权限的用户写操作 注：建议在主从复制中的从库开启此功能。以确保不能修改从库中的操作，只能从主库同步过来
skip_slave_start 禁用salve自动恢复(从库中的设置使用)
sql_mode 设置mysql所使用的sql模式 （谨慎操作，可能会造成mysql无法执行）
① strict_trans_tables 给定的数据如果不能插入到数据库中，对事务引擎会终端操作，对非事务引擎是没有影响的
② no_engine_subitiution 在create table中指定engines的时候，如果引擎不可用，不会使用默认引擎建立表
③ no_zero_date 不能再表中插入0年0月0日的日期
④ no_zero_in_date 不接受一部分的为0的日期
⑤ noly_full_group_by

其他常用的配置参数
sync_binlog 控制mysql如何向磁盘刷新binlog
tmp_table_size 和 max_heap_table_size 控制内存临时表大小(不宜设置的太大，以避免内存的溢出)
max_connections 控制允许的最大连接数(默认为100，有点小，根据自己的业务适当的调整大小)

什么影响了性能

数据库设计对性能的影响
1、过分的反范式化为表建立太多的列
2、过分的范式化造成太多的表关联（关联的表尽可能的控制在10个之内）
3、在oltp环境中使用不前挡的分区表
4、使用外键保证数据的完整性

总结

性能优化的顺序
1、数据库结构设计和sql语句
2、数据库存储引擎的选择参数配置
3、系统选择及优化
4、硬件升级