欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

mysql 架构篇系列 2 复制架构一主一从搭建(异步复制)

程序员文章站 2022-07-01 23:51:41
一. 环境准备 1.1 主库环境(172.168.18.201) 环境 说明 查看脚本 操作系统版本 CentOS Linux release 7.4.1708 (Core) cat /etc/redhat-release 操作系统用户名和密码 root js*2015 IP地址 172.168.1 ......

一. 环境准备

  1.1 主库环境(172.168.18.201)

环境

说明

查看脚本

操作系统版本

centos linux release 7.4.1708 (core)

cat /etc/redhat-release

操作系统用户名和密码

root  js*2015

 

ip地址

172.168.18.201

ip addr

网关gateway

172.168.18.1

cat /etc/sysconfig/network-scripts

dns

172.168.16.11

 

mysql 版本

distrib 5.7.23

mysql --help | grep distrib

或者 select version(); 

mysql 用户名和密码

root  123456

 

mysql 端口

3306

grep mysql /etc/services

或者 how global variables like 'port'

  1.2 从库环境(172.168.18.203)

环境

说明

操作系统版本

centos linux release 7.4.1708 (core)

操作系统用户名和密码

root  js*2015

ip地址

172.168.18.203

网关gateway

172.168.18.1

dns

172.168.16.11

mysql 版本

distrib 5.7.20

mysql 用户名和密码

root    js*2015% 

(后面主库数据还原到从库后,密码跟主库的一样“123456”)

mysql 端口

3306

  1.3 主库是用二进制安装,从库是用rpm安装,下面是查看的不同命令,脚本如下所示:

-- 主库启动mysql服务
service mysql start
-- 主库连接到mysql命令
mysql -uroot -p123456 
-- 主库查看mysql是否启动
service mysql  status

-- 从库启动 mysql服务
 systemctl  start mysqld
-- 从库连接到mysql命令
mysql -uroot -p js*2015%
-- 从库查看mysql是否启动
systemctl  status  mysqld

  1.4 其它
    (1) 主从服务器相互接通对方ip。 例如在主库上拼: ping 172.168.18.203。
    (2) 使用telnet 拼通对方mysql端口。例如在从库上拼: telnet 172.168.18.201 3306

 

二. 异步复制搭建(主库)

  主从复制配置步骤比较简单,下面详细介绍,确保主从库上安装了相同版本的数据库,因为复制的功能在持续的改进中。这里一个是5.7.23,一个是5.7.20。二个相近的版本(最好是一个版本)。

  2.1 在主库上,设置一个复制使用的mysql账户,并授予replication slave 权限,创建主库复制用户rep1。(注意:需要把 'rep1'@'172.168.18.201'  改成 'rep1'@'%'   在文章最后,测试复制是否成功会讲到)

-- 172.168.18.201 主库 创建rep1 用户
grant replication slave on *.* to 'rep1'@'172.168.18.201'  identified by '123456'

  

  2.2 在主库上修改服务器配置文件my.cnf, 开启binlog, 并设置server-id的值,之后重启数据库服务生效。开启binlog日志,详细说明在:mysql 开发进阶篇系列 33 工具篇(mysqlbinlog日志管理工具) 中讲到,my.cnf配置如下:

[mysqld]
server-id=1
log-bin=/var/lib/mysql/mysql-bin

 

  2.3 在主库上,设置读锁定,这个操作为了确保没有数据库操作,以便获得一个一致性的快照。

 -- 锁住当前主库, 其它会话增删改等修改操作将会阻塞
flush tables with read lock;

 

  2.4 得到主库当前的二进制日志名和偏移量值,这个操作是为了在从库上启动以后,从这个点开始进行数据的恢复

 show master status

mysql 架构篇系列 2  复制架构一主一从搭建(异步复制)

 

  2.5 现在主数据库已经停止更新操作了,需要生成主数据库的备份,备份可以直接在操作系统下复制全部的数据到从库服务器上,也可以通过mysqldump或xtrabackup 工具进行数据库备份。下面使用xtrabackup来克隆到slave。下面在主库上进行备份。

-- 先删除以前历史备份
[root@hsr base]# rm -rf /data/backups/base
 -- 完整备份
[root@hsr base]# xtrabackup --host=127.0.0.1 --user bkpuser --password=123456 --backup --target-dir=/data/backups/base

mysql 架构篇系列 2  复制架构一主一从搭建(异步复制)
  2.6 备份结束后,恢复主库写操作

unlock tables;

 

  2.7 将备份文件复制到从库上

    可以使用rsync命令来实现文件拷贝,我这里简单起见使用xtfp来传送文件。同样在从库上也建相同的目录,主库数据文件拷贝到从库目录后,如下图所示
mysql 架构篇系列 2  复制架构一主一从搭建(异步复制)

 

三. 异步复制搭建(从库)

  3.1  数据还原,使主库和从库的数据库和表保持一致,从库是一个相同的副本

    在从库上安装好xtrabackup工具,配置好mysql备份用户,脚本如下,可参照:mysql 开发进阶篇系列 45 物理备份与恢复(xtrabackup 安装,用户权限,配置)

(1) -- 从库 203配置mysql备份用户脚本如下
create user 'bkpuser'@'localhost' identified by '12345678';
grant reload,lock tables,replication client on *.* to 'bkpuser'@'localhost';
grant process,super on *.* to 'bkpuser'@'localhost';

(2) -- 数据还原到从库,从库data目录是 /var/lib/mysql,按下面脚本顺序操作
-- 停掉从库服务
[root@xuegod64 mysql]# systemctl  stop mysqld
-- 将mysql文件重命名为mysqlbak文件(备份)
[root@xuegod64 mysql]# mv /var/lib/mysql /var/lib/mysqlbak
-- 数据还原到从库
[root@xuegod64 lib]# xtrabackup  --defaults-file=/etc/my.cnf  --host=127.0.0.1  --user bkpuser --password=12345678 --copy-back 
--target-dir=/data/backups/base

    此时数据已还原,如下图所示 :
mysql 架构篇系列 2  复制架构一主一从搭建(异步复制)

(3)-- 下面将mysql文件的属主从root改为mysql
[root@xuegod64 lib]# chown -r mysql.mysql /var/lib/mysql
[root@xuegod64 lib]# chmod 770 /var/lib/mysql

 

  3.2 配置从库 my.cnf

    修改从库配置文件,增加server-id 参数,注意server-id的值必须唯一,不能和主数据库的配置相同,如果有多个从服务器,每个从服务器必须有唯一的server-id值。

 [mysqld]
server-id=2

 

  3.3 在从库上,使用skip-slave-start选项启动从数据库,这样不会立即启动从库的复制进程,目的方便下一步配置

[mysqld]
server-id=2
skip-slave-start=true
-- 启动服务
[root@xuegod64 lib]# systemctl  start  mysqld

 

  3.4 对从库做相应的配置,指定复制使用的用户,主数据库服务器ip, 端口,以及开始执行复制的日志文件和位置等,脚本如下:

change master to 
master_host='172.168.18.201',
master_port=3306,
master_user='rep1',
master_password='123456',
master_log_file='mysql-bin.000070',
master_log_pos=785

 

  3.5 从库上启动slave线程

start slave

 

  3.6 查看是否配置正确(从库上)

show processlist

    如下图所示:表明slave已经连接上master, 并开始接受并执行日志。
mysql 架构篇系列 2  复制架构一主一从搭建(异步复制)


四. 验证测试复制 

  4.1  测试复制服务的正确性。 下面在主数据库上执行一个更新操作,观察是否在从库上同步。

-- 在主库上更新数据
select * from testbackup where id=12
update testbackup set `name`='小李子' where id=12

 

  4.2 查看从库testbackup表

-- 数据没有更新过来,检查从库复制线程状态
show slave status

    错误提示:在last_io_error中出现: error connecting to master 'rep1@172.168.18.201:3306' - retry-time: 60  retries: 10

 

  4.3 测试从库203上连接主库201,结果连接失败

[root@xuegod64 lib]# mysql -urep1 -h 172.168.18.201 -p123456
mysql: [warning] using a password on the command line interface can be insecure.
error 1045 (28000): access denied for user 'rep1'@'aca812cb.ipt.aol.com' (using password: yes)
--解决方法:在主库将rep1的host 值从172.168.18.201改为 %
   update mysql.user set `host`='%' where `user`='rep1'
    flush privileges
-- 再测试从库203上连接主库201, 结果连接成功
[root@xuegod64 lib]# mysql -urep1 -h 172.168.18.201 -p123456
mysql: [warning] using a password on the command line interface can be insecure.
welcome to the mysql monitor.  commands end with ; or \g.
your mysql connection id is 180
-- 从库203上停止,再重启slave线程。
stop slave
start slave

    最终在从库203查看数据是否已经同步, 结果已同步
mysql 架构篇系列 2  复制架构一主一从搭建(异步复制)