Mysql主从同步的实现原理与配置实战
1、什么是mysql主从同步?
当master(主)库的数据发生变化的时候,变化会实时的同步到slave(从)库。
2、主从同步有什么好处?
- 水平扩展数据库的负载能力。
- 容错,高可用。failover(失败切换)/high availability
- 数据备份。
3、主从同步的原理是什么?
首先我们来了解master-slave的体系结构。如下图:
不管是delete、update、insert,还是创建函数、存储过程,所有的操作都在master上。当master有操作的时候,slave会快速的接收到这些操作,从而做同步。
但是,这个机制是怎么实现的呢?在master机器上,主从同步事件会被写到特殊的log文件中(binary-log);在slave机器上,slave读取主从同步事件,并根据读取的事件变化,在slave库上做相应的更改。
如此,就实现了主从同步了!
下面我们来详细的了解。3.1主从同步事件有哪些上面说到:在master机器上,主从同步事件会被写到特殊的log文件中(binary-log);
主从同步事件有3种形式:statement、row、mixed。
- statement:会将对数据库操作的sql语句写入到binlog中。
- row:会将每一条数据的变化写入到binlog中。
- mixed:statement与row的混合。mysql决定什么时候写statement格式的,什么时候写row格式的binlog。
3.2在master机器上的操作
当master上的数据发生改变的时候,该事件(insert、update、delete)变化会按照顺序写入到binlog中。binlog dump线程当slave连接到master的时候,master机器会为slave开启binlog dump线程。当master 的 binlog发生变化的时候,binlog dump线程会通知slave,并将相应的binlog内容发送给slave。
3.3在slave机器上的操作
当主从同步开启的时候,slave上会创建2个线程。
- i/o线程。该线程连接到master机器,master机器上的binlog dump线程会将binlog的内容发送给该i/o线程。该i/o线程接收到binlog内容后,再将内容写入到本地的relay log。
- sql线程。该线程读取i/o线程写入的relay log。并且根据relay log的内容对slave数据库做相应的操作。
3.4如何在master、slave上查看上述的线程?
使用show processlist命令可以查看。如图,在master机器上查看binlog dump线程
如图,在slave机器上查看i/o、sql线程。
接下来给大家讲解mysql主从同步实战系统环境:系统的话大同小异,都差不多,我这里用的是ubuntu16.04+mysql5.7,用到两台服务器:其中master ip:192.168.33.22,另一个slave ip:192.168.33.33
master机器上的操作
1、更改配置文件我们找到文件/etc/mysql/mysql.conf.d/mysqld.cnf
。
配置如下:
bind-address = 192.168.33.22 #your master ip server-id = 1 #在master-slave架构中,每台机器节点都需要有唯一的server-id log_bin = /var/log/mysql/mysql-bin.log #开启binlog
2、重启mysql,以使配置文件生效。
sudo systemctl restart mysql
3、创建主从同步的mysql user。
$ mysql -u root -p password: ##创建slave1用户,并指定该用户只能在主机192.168.33.33上登录。 mysql> create user 'slave1'@'192.168.33.33' identified by 'slavepass'; query ok, 0 rows affected (0.00 sec) ##为slave1赋予replication slave权限。 mysql> grant replication slave on *.* to 'slave1'@'192.168.33.33'; query ok, 0 rows affected (0.00 sec)
4、为mysql加读锁为了主库与从库的数据保持一致,我们先为mysql加入读锁,使其变为只读。
mysql> flush tables with read lock; query ok, 0 rows affected (0.00 sec)
5、记录下来master replication log 的位置该信息稍后会用到。
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+ | file | position | binlog_do_db | binlog_ignore_db | executed_gtid_set | +------------------+----------+--------------+------------------+-------------------+ | mysql-bin.000001 | 613 | | | | +------------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec)
6、将master db中现有的数据信息导出
$ mysqldump -u root -p --all-databases --master-data > dbdump.sql
7、接触master db的读锁
mysql> unlock tables;
8、将步骤6中的dbdump.sql文件copy到slave
scp dbdump.sql ubuntu@192.168.33.33:/home/ubuntu
slave机器上的操作
1、更改配置文件我们找到文件/etc/mysql/mysql.conf.d/mysqld.cnf
。
更改配置如下:
bind-address = 192.168.33.33 #your slave ip server-id = 2 #master-slave结构中,唯一的server-id log_bin = /var/log/mysql/mysql-bin.log #开启binlog
2、重启mysql,以使配置文件生效
sudo systemctl restart mysql
3、导入从master db。导出的dbdump.sql文件,以使master-slave数据一致
$ mysql -u root -p < /home/ubuntu/dbdump.sql
4、使slave与master建立连接,从而同步
$ mysql -u root -p password: mysql> stop slave; query ok, 0 rows affected, 1 warning (0.00 sec) mysql> change master to -> master_host='192.168.33.22', -> master_user='slave1', -> master_password='slavepass', -> master_log_file='mysql-bin.000001', -> master_log_pos=613; query ok, 0 rows affected, 2 warnings (0.01 sec) mysql> start slave; query ok, 0 rows affected (0.00 sec) master_log_file='mysql-bin.000001'与master_log_pos=613的值,是从上面的show master status得到的。经过如此设置之后,就可以进行master-slave同步了
~