MySQL日志各类总结

Mysql的日志分类
1.事务日志：transaction log
事务日志的写入类型为"追加"，因此其操作为“顺序IO”；通常也被称为：预写式日志 write ahead logging
   事务日志文件：ib_logfile0,ib_logfile1
错误日志：error log
通用日志：general log
慢查询日志：show query log
二进制日志：binary log
中继日志 reley log，在主从复制架构中，从服务器用于保存主服务器的二进制日志中读取的事件事务的基本要素
1、原子性（Atomicity）：事务开始后所有操作，要么全部做完，要么全部不做，不可能停滞在中间环节。事务执行过程中出错，会回滚到事务开始前的状态，所有的操作就像没有发生一样。也就是说事务是一个不可分割的整体，就像化学中学过的原子，是物质构成的基本单位。
　　2、一致性（Consistency）：事务开始前和结束后，数据库的完整性约束没有被破坏 。比如A向B转账，不可能A扣了钱，B却没收到。 
　　3、隔离性（Isolation）：同一时间，只允许一个事务请求同一数据，不同的事务之间彼此没有任何干扰。比如A正在从一张银行卡中取钱，在A取钱的过程结束前，B不能向这张卡转账。
　　4、持久性（Durability）：事务完成后，事务对数据库的所有更新将被保存到数据库，不能回滚。
日志介绍
事务日志：transcation log
redo log:实现WAL（write Ahead log），数据更新前先记录redo log
undo log：保存与执行的操作相反的操作，用于实现roolback
事务型存储引擎自行管理和使用，建议和数据文件分开存放
Innodb事务日志相关配置：

show variables like '%innodb_log%';

innodb_log_file_size  #每个日志文件的大小
innodb_log_file_in_group 2 #日志组成员个数
innodb_log_group_home_dir #事务文件路径
innodb_flush_log_at_trx_commit #默认为1

事务日志性能优化

innodb_flush_log_at_trx_commit=0|1|2

1 默认值，日志缓冲区将写入日志文件，并在每次事务后执行刷新到磁盘，完全遵守ACID特性
0 提交是没有写磁盘的操作，二十每秒执行一次将日志缓冲区的提交事务写入刷新到磁盘。这样可以提供更好的性能，但服务器崩溃可能丢失最后一秒的事务
2 每次提交后都会写入os的缓冲区，但每秒才会进行异常刷新到磁盘文件中。性能比0略差一些，dan 操作系统故障或停电可能导致最后一秒的交易数据丢失

错误日志
mysql启动和关闭过程中输出的事件信息
mysqld运行运行中产生的错误信息
event.schedule运行一个event时产生的日志信息
在主从复制架构中的从服务器上启动从服务器线程是产生的信息
路径

show global variable like 'log_error';

记录哪些告警信息至错误日志
log_warnings=0|1|2|3...
查看当前告警级别命令

show global variables like 'log_warnings';

通用日志
记录对数据库的通用操作，包括:错误的sql语句
通用日志可以保存在：file(默认值)或table（mysql.general_log表）
通用日志相关设置

general_log=ON|OFF
general_log_file=HOSTNAME.log
log_output_TABLE|FILE|NONE

修改通用日志，记录通用日志到mysql.general_log表中

set global log_output="table";
show global varrables like 'log_output';

慢查询日志
记录执行查询时长超出知道时常的操作
慢查询的相关变量

slow_query_log=ON|OFF #开启或关闭慢查询，支持全局和会话，只有全局设置才会生成慢查询文件
long_query_time=N #慢查询的阀值，单位秒,默认为10s
slow_query_log_file=HOSTNAME-slow.log #慢查询日志文件
log_slow_filter = admin,filesort,filesort_on_disk,full_join,full_scan,
query_cache,query_cache_miss,tmp_table,tmp_table_on_disk
#上述查询类型且查询时长超过long_query_time，则记录日志
log_queries_not_using_indexes=ON #不使用索引或使用全索引扫描，不论是否达到慢查询阀值的语
句是否记录日志，默认OFF，即不记录
log_slow_rate_limit = 1 #多少次查询才记录，mariadb特有
log_slow_verbosity= Query_plan,explain #记录内容
log_slow_queries = OFF #同slow_query_log，MariaDB 10.0/MySQL 5.6.1 版后已删除

二进制日志
记录导致数据改变或潜在导致数据改变的sql语句
记录已提交的日志
不依赖存储引擎
功能：通过"重放"日志文件中的时间来生成数据副本
注意：建议二进制日志和数据文件分开存放(二进制文件可用来恢复数据库)
二进制日志记录的三种格式
基于“语句”：statement,记录语句，默认模式（mariaDB 10.2.3。版本以下），日志量较少
基于“行”：row，记录数据，日志较大，更加安全，建议使用的格式
混合模式：mixed，让系统自行判断该基于哪一种方式进行，默认模式（MariaDB 10.2.4及以上版本）
格式配置

show variables like 'binlog_format';

二进制文件的构成
1.日志文件：mysql|mariadb-bin.文件名后缀，二进制格式，如:on.00001,mariadb-bin.00002
2.索引文件：mysql|maraidb-bin.index，文本格式,记录当前已有的二进制年终文件列表

二进制日志的相关服务器变量：

sql_log_bin=ON|OFF：#是否记录二进制日志，默认ON，支持动态修改，系统变量，而非服务器选项
log_bin=/PATH/BIN_LOG_FILE：#指定文件位置；默认OFF，表示不启用二进制日志功能，上述两项都开
启才可以
binlog_format=STATEMENT|ROW|MIXED：#二进制日志记录的格式，默认STATEMENT
max_binlog_size=1073741824：#单个二进制日志文件的最大体积，到达最大值会自动滚动，默认为1G
#说明：文件达到上限时的大小未必为指定的精确值
binlog_cache_size=4m #此变量确定在每次事务中保存二进制日志更改记录的缓存的大小（每次连接）
max_binlog_cache_size=512m #限制用于缓存多事务查询的字节大小。
sync_binlog=1|0：#设定是否启动二进制日志即时同步磁盘功能，默认0，由操作系统负责同步日志到磁盘
expire_logs_days=N：#二进制日志可以自动删除的天数。 默认为0，即不自动删除