mysql 架构篇系列 2 复制架构一主一从搭建(异步复制)
一. 环境准备
1.1 主库环境(172.168.18.201)
环境 |
说明 |
查看脚本 |
操作系统版本 |
centos linux release 7.4.1708 (core) |
cat /etc/redhat-release |
操作系统用户名和密码 |
root js*2015 |
|
ip地址 |
172.168.18.201 |
ip addr |
网关gateway |
172.168.18.1 |
cat /etc/sysconfig/network-scripts |
dns |
172.168.16.11 |
|
mysql 版本 |
distrib 5.7.23 |
mysql --help | grep distrib 或者 select version(); |
mysql 用户名和密码 |
root 123456 |
|
mysql 端口 |
3306 |
grep mysql /etc/services 或者 how global variables like 'port' |
1.2 从库环境(172.168.18.203)
环境 |
说明 |
操作系统版本 |
centos linux release 7.4.1708 (core) |
操作系统用户名和密码 |
root js*2015 |
ip地址 |
172.168.18.203 |
网关gateway |
172.168.18.1 |
dns |
172.168.16.11 |
mysql 版本 |
distrib 5.7.20 |
mysql 用户名和密码 |
root js*2015% (后面主库数据还原到从库后,密码跟主库的一样“123456”) |
mysql 端口 |
3306 |
1.3 主库是用二进制安装,从库是用rpm安装,下面是查看的不同命令,脚本如下所示:
-- 主库启动mysql服务 service mysql start -- 主库连接到mysql命令 mysql -uroot -p123456 -- 主库查看mysql是否启动 service mysql status -- 从库启动 mysql服务 systemctl start mysqld -- 从库连接到mysql命令 mysql -uroot -p js*2015% -- 从库查看mysql是否启动 systemctl status mysqld
1.4 其它
(1) 主从服务器相互接通对方ip。 例如在主库上拼: ping 172.168.18.203。
(2) 使用telnet 拼通对方mysql端口。例如在从库上拼: telnet 172.168.18.201 3306
二. 异步复制搭建(主库)
主从复制配置步骤比较简单,下面详细介绍,确保主从库上安装了相同版本的数据库,因为复制的功能在持续的改进中。这里一个是5.7.23,一个是5.7.20。二个相近的版本(最好是一个版本)。
2.1 在主库上,设置一个复制使用的mysql账户,并授予replication slave 权限,创建主库复制用户rep1。(注意:需要把 'rep1'@'172.168.18.201' 改成 'rep1'@'%' 在文章最后,测试复制是否成功会讲到)
-- 172.168.18.201 主库 创建rep1 用户 grant replication slave on *.* to 'rep1'@'172.168.18.201' identified by '123456'
2.2 在主库上修改服务器配置文件my.cnf, 开启binlog, 并设置server-id的值,之后重启数据库服务生效。开启binlog日志,详细说明在:mysql 开发进阶篇系列 33 工具篇(mysqlbinlog日志管理工具) 中讲到,在my.cnf配置如下:
[mysqld] server-id=1 log-bin=/var/lib/mysql/mysql-bin
2.3 在主库上,设置读锁定,这个操作为了确保没有数据库操作,以便获得一个一致性的快照。
-- 锁住当前主库, 其它会话增删改等修改操作将会阻塞 flush tables with read lock;
2.4 得到主库当前的二进制日志名和偏移量值,这个操作是为了在从库上启动以后,从这个点开始进行数据的恢复
show master status
2.5 现在主数据库已经停止更新操作了,需要生成主数据库的备份,备份可以直接在操作系统下复制全部的数据到从库服务器上,也可以通过mysqldump或xtrabackup 工具进行数据库备份。下面使用xtrabackup来克隆到slave。下面在主库上进行备份。
-- 先删除以前历史备份 [root@hsr base]# rm -rf /data/backups/base -- 完整备份
[root@hsr base]# xtrabackup --host=127.0.0.1 --user bkpuser --password=123456 --backup --target-dir=/data/backups/base
2.6 备份结束后,恢复主库写操作
unlock tables;
2.7 将备份文件复制到从库上
可以使用rsync命令来实现文件拷贝,我这里简单起见使用xtfp来传送文件。同样在从库上也建相同的目录,主库数据文件拷贝到从库目录后,如下图所示
三. 异步复制搭建(从库)
3.1 数据还原,使主库和从库的数据库和表保持一致,从库是一个相同的副本
在从库上安装好xtrabackup工具,配置好mysql备份用户,脚本如下,可参照:mysql 开发进阶篇系列 45 物理备份与恢复(xtrabackup 安装,用户权限,配置)
(1) -- 从库 203配置mysql备份用户脚本如下 create user 'bkpuser'@'localhost' identified by '12345678'; grant reload,lock tables,replication client on *.* to 'bkpuser'@'localhost'; grant process,super on *.* to 'bkpuser'@'localhost'; (2) -- 数据还原到从库,从库data目录是 /var/lib/mysql,按下面脚本顺序操作 -- 停掉从库服务 [root@xuegod64 mysql]# systemctl stop mysqld -- 将mysql文件重命名为mysqlbak文件(备份) [root@xuegod64 mysql]# mv /var/lib/mysql /var/lib/mysqlbak -- 数据还原到从库 [root@xuegod64 lib]# xtrabackup --defaults-file=/etc/my.cnf --host=127.0.0.1 --user bkpuser --password=12345678 --copy-back
--target-dir=/data/backups/base
此时数据已还原,如下图所示 :
(3)-- 下面将mysql文件的属主从root改为mysql [root@xuegod64 lib]# chown -r mysql.mysql /var/lib/mysql [root@xuegod64 lib]# chmod 770 /var/lib/mysql
3.2 配置从库 my.cnf
修改从库配置文件,增加server-id 参数,注意server-id的值必须唯一,不能和主数据库的配置相同,如果有多个从服务器,每个从服务器必须有唯一的server-id值。
[mysqld] server-id=2
3.3 在从库上,使用skip-slave-start选项启动从数据库,这样不会立即启动从库的复制进程,目的方便下一步配置
[mysqld] server-id=2 skip-slave-start=true
-- 启动服务 [root@xuegod64 lib]# systemctl start mysqld
3.4 对从库做相应的配置,指定复制使用的用户,主数据库服务器ip, 端口,以及开始执行复制的日志文件和位置等,脚本如下:
change master to master_host='172.168.18.201', master_port=3306, master_user='rep1', master_password='123456', master_log_file='mysql-bin.000070', master_log_pos=785
3.5 从库上启动slave线程
start slave
3.6 查看是否配置正确(从库上)
show processlist
如下图所示:表明slave已经连接上master, 并开始接受并执行日志。
四. 验证测试复制
4.1 测试复制服务的正确性。 下面在主数据库上执行一个更新操作,观察是否在从库上同步。
-- 在主库上更新数据 select * from testbackup where id=12 update testbackup set `name`='小李子' where id=12
4.2 查看从库testbackup表
-- 数据没有更新过来,检查从库复制线程状态 show slave status
错误提示:在last_io_error中出现: error connecting to master 'rep1@172.168.18.201:3306' - retry-time: 60 retries: 10
4.3 测试从库203上连接主库201,结果连接失败
[root@xuegod64 lib]# mysql -urep1 -h 172.168.18.201 -p123456 mysql: [warning] using a password on the command line interface can be insecure. error 1045 (28000): access denied for user 'rep1'@'aca812cb.ipt.aol.com' (using password: yes)
--解决方法:在主库将rep1的host 值从172.168.18.201改为 % update mysql.user set `host`='%' where `user`='rep1' flush privileges -- 再测试从库203上连接主库201, 结果连接成功 [root@xuegod64 lib]# mysql -urep1 -h 172.168.18.201 -p123456 mysql: [warning] using a password on the command line interface can be insecure. welcome to the mysql monitor. commands end with ; or \g. your mysql connection id is 180
-- 从库203上停止,再重启slave线程。 stop slave start slave
最终在从库203查看数据是否已经同步, 结果已同步
下一篇: Storm学习笔记 - Storm初识