MySQL主从、主主互备

程序员文章站 2022-04-08 22:51:50

...

Docker部署MySQL主/从复制集群搭建

一共三个文件，按需求修改配置；保存文件。

vim Dockerfile

FROM mysql:5.7
COPY replica.sh /docker-entrypoint-initdb.d/

##############################################################################################
vim docker-compose.yml
# Master密码：master_passw0rd  Slave密码：slave_passw0rd ，同步账户replica_Passw0rd 可以修改。
# 端口建议修改。

version: '2'
services:
    master:
        container_name: master
        image: mysql:5.7-replica
        build:
            context: .
            dockerfile: Dockerfile
        restart: unless-stopped
        ports:
            - 3306:3306
        environment:
            - MYSQL_ROOT_PASSWORD=master_passw0rd
            - MYSQL_REPLICA_USER=replica
            - MYSQL_REPLICA_PASS=replica_Passw0rd
        command: ["mysqld", "--log-bin=mysql-bin", "--server-id=1"]
    slave:
        container_name: slave
        image: mysql:5.7-replica
        build:
            context: .
            dockerfile: Dockerfile
        restart: unless-stopped
        ports:
            - 3307:3306
        environment:
            - MYSQL_ROOT_PASSWORD=slave_passw0rd
            - MYSQL_REPLICA_USER=replica
            - MYSQL_REPLICA_PASS=replica_Passw0rd
            - MYSQL_MASTER_SERVER=master
            - MYSQL_MASTER_WAIT_TIME=10
        command: ["mysqld", "--log-bin=mysql-bin", "--server-id=2"]

##############################################################################################
vim replica.sh
# 如果docker-compose.yml文件改了端口，这里注意也要修改端口。

#!/bin/bash

# Most of the code are copied from ioggstream's PR, docker-library/mysql#43:
# <https://github.com/docker-library/mysql/pull/43/files>
#
# Supported environment variables for this replica.sh:
#  - MYSQL_REPLICA_USER: create the given user on the intended master host
#  - MYSQL_REPLICA_PASS
#  - MYSQL_MASTER_SERVER: change master on this location on the intended slave
#  - MYSQL_MASTER_PORT: optional, by default 3306
#  - MYSQL_MASTER_WAIT_TIME: seconds to wait for the master to come up

#
# A replication user (actually created on both master and slaves)
#
if [ "$MYSQL_REPLICA_USER" ]; then
        if [ -z "$MYSQL_REPLICA_PASS" ]; then
                echo >&2 'error: MYSQL_REPLICA_USER set, but MYSQL_REPLICA_PASS not set'
                exit 1
        fi
        echo "CREATE USER '$MYSQL_REPLICA_USER'@'%' IDENTIFIED BY '$MYSQL_REPLICA_PASS'; " | "${mysql[@]}"
        echo "GRANT REPLICATION SLAVE ON *.* TO '$MYSQL_REPLICA_USER'@'%'; " | "${mysql[@]}"
        # REPLICATION CLIENT privileges are required to get master position
        echo "GRANT REPLICATION CLIENT ON *.* TO '$MYSQL_REPLICA_USER'@'%'; " | "${mysql[@]}"
fi

#
# On the slave: point to a master server
#
if [ "$MYSQL_MASTER_SERVER" ]; then
    MYSQL_MASTER_PORT=${MYSQL_MASTER_PORT:-3306}
    MYSQL_MASTER_WAIT_TIME=${MYSQL_MASTER_WAIT_TIME:-3}

    if [ -z "$MYSQL_REPLICA_USER" ]; then
            echo >&2 'error: MYSQL_REPLICA_USER not set'
            exit 1
    fi
    if [ -z "$MYSQL_REPLICA_PASS" ]; then
            echo >&2 'error: MYSQL_REPLICA_PASS not set'
            exit 1
    fi

    # Wait for eg. 10 seconds for the master to come up
    # do at least one iteration
    for i in $(seq $((MYSQL_MASTER_WAIT_TIME + 1))); do
        if ! mysql "-u$MYSQL_REPLICA_USER" "-p$MYSQL_REPLICA_PASS" "-h$MYSQL_MASTER_SERVER" -e 'select 1;' |grep -q 1; then
            echo >&2 "Waiting for aaa@qq.com$MYSQL_MASTER_SERVER"
            sleep 1
        else
            break
        fi
    done

    if [ "$i" -gt "$MYSQL_MASTER_WAIT_TIME" ]; then
        echo 2>&1 "Master is not reachable"
        exit 1
    fi

    # Get master position and set it on the slave. NB: MASTER_PORT and MASTER_LOG_POS must not be quoted
    MasterPosition=$(mysql "-u$MYSQL_REPLICA_USER" "-p$MYSQL_REPLICA_PASS" "-h$MYSQL_MASTER_SERVER" -e "show master status \G" | awk '/Position/ {print $2}')
    MasterFile=$(mysql  "-u$MYSQL_REPLICA_USER" "-p$MYSQL_REPLICA_PASS" "-h$MYSQL_MASTER_SERVER"   -e "show master status \G"     | awk '/File/ {print $2}')
    echo "CHANGE MASTER TO MASTER_HOST='$MYSQL_MASTER_SERVER', MASTER_PORT=$MYSQL_MASTER_PORT, MASTER_USER='$MYSQL_REPLICA_USER', MASTER_PASSWORD='$MYSQL_REPLICA_PASS', MASTER_LOG_FILE='$MasterFile', MASTER_LOG_POS=$MasterPosition;"  | "${mysql[@]}"

    echo "START SLAVE;"  | "${mysql[@]}"
fi

配置文件准备好了，启动容器。

yum install docker-compose -y
docker-compose up -d

以下是在Neil的博客上看到的一篇博文，由于没有试验环境，没有经过测试，以后测试后会更新并删除本段文字，摘录分享，仅供参考。

MySQL Replication

mysql 主主互备

双机热备的概念简单说一下，就是要保持两个数据库的状态自动同步。对任何一个数据库的操作都自动应用到另外一个数据库，始终保持两个数据库数据一致。这样做的好处多。

1.可以做灾备，其中一个坏了可以切换到另一个。
2.可以做负载均衡，可以将请求分摊到其中任何一台上，提高网站吞吐量。
3.对于异地热备，尤其适合灾备。

mysql -v,查看使用的是mysql 5.5.34，

mysql 备份工作原理

简单的说就是把一个服务器上执行过的sql语句在别的服务器上也重复执行一遍，这样只要两个数据库的初态是一样的，那么它们就能一直同步。

当然这种复制和重复都是mysql自动实现的，我们只需要配置即可。
MySQL主从、主主互备
上图中有两个服务器，演示了从一个主服务器（master）把数据同步到从服务器（slave）的过程。
这是一个主-从复制的例子。主-主互相复制只是把上面的例子反过来再做一遍。所以我们以这个例子介绍原理。

对于一个mysql服务器，一般有两个线程来负责复制和被复制。当开启复制之后。

1.作为主服务器Master，会把自己的每一次改动都记录到二进制日志 Binarylog 中。（从服务器会负责来读取这个log，然后在自己那里再执行一遍。）
2.作为从服务器Slave，会用master上的账号登陆到 master上，读取master的Binarylog, 写入到自己的中继日志 Relaylog，然后自己的sql线程会负责读取这个中继日志，并执行一遍。到这里主服务器上的更改就同步到从服务器上了。

在mysql上可以查看当前服务器的主，从状态。其实就是当前服务器的 Binary（作为主服务器角色）状态和位置。以及其RelayLog（作为从服务器）的复制进度。

例如我们在主服务器上查看主状态：
MySQL主从、主主互备
第一行表明当前正在记录的 binarylog文件名是： mysql-bin.000014.
我们可以在mysql数据目录下，找到这个文件：

第二行， 107. 表示当前的文件偏移量，就是写入在mysql-bin.000014 文件的记录位置。
这两点就构成了主服务器的状态。配置从服务器的时候，需要用到这两个值。告诉从服务器从哪读取主服务器的数据。（从服务器会登录之后，找到这个日志文件，并从这个偏移量之后开始复制。）

第三行，和第四行，表示需要记录的数据库和需要忽略的数据库。只有需要记录的数据库，其变化才会被写入到mysql-bin.000014日志文件中。后面会再次介绍这两个参数。

我们还可以在从服务器上，查看从服务器的复制状态：mysql> show slave status\G
MySQL主从、主主互备
我们还是来重点解释途中的红圈的部分：

Master_host 指的是主服务器的地址。
Master_user 指的是主服务器上用来复制的用户。从服务器会用此账号来登录主服务。进行复制。
Master_log_file 就是前面提到的，主服务器上的日志文件名.
Read_Master_log_pos 就是前面提到的主服务器的日志记录位置，从服务器根据这两个条件来选择复制的文件和位置。
Slave_IO_Running: 指的就是从服务器上负责读取主服务器的线程工作状态。从服务器用这个专门的线程链接到主服务器上，并把日志拷贝回来。
Slave_SQL_Running: 指的就是专门执行sql的线程。它负责把复制回来的Relaylog执行到自己的数据库中。这两个参数必须都为Yes 才表明复制在正常工作。

其他的参数之后再介绍。

mysql 双机热备实战

主从复制

了解了上面的原理之后，我们来实战。这里有两个重点，要想同步数据库状态，需要相同的初态，然后配置同步才有意义。当然你可以不要初态，这是你的*。我们这里从头开始配置一遍。
MySQL主从、主主互备

我们先以A服务器为起点，配置它的数据库同步到B。这就是主-从复制了。之后再反过来做一次，就可以互相备份了。

在A上面创建专门用于备份的用户

grant replication slave on *.* to 'repl_userl'@''
grant replication slave on *.* to 'repl_user'@'192.***.***.***' identified by 'hj34$%&mnkb';

上面把ip地址换成B机器的ip地址。只允许B登录。安全。
用户名为： repl_user
密码为： hj34$nkb
这个等会在B上面要用。

开启主服务器的 binarylog。

很多服务器是默认开启的，我们这里检查一下：
打开 /etc/my.cnf
MySQL主从、主主互备
解释一下红框中的配置：
前面三行，你可能已经有了。
binlog-do-db 用来表示，只把哪些数据库的改动记录到binary日志中。可以写上关注hello数据库。但是我把它注释掉了。只是展示一下。可以写多行，表示关注多个数据库。
binlog-ignore-db表示，需要忽略哪些数据库。我这里忽略了其他的4个数据库。

最后两行用于在双主（多主循环）互相备份。因为每台数据库服务器都可能在同一个表中插入数据，如果表有一个自动增长的主键，那么就会在多服务器上出现主键冲突。解决这个问题的办法就是让每个数据库的自增主键不连续。上图说是，我假设需要将来可能需要10台服务器做备份，所以auto-increment-increment 设为10。而 auto-increment-offset=1 表示这台服务器的序号。从1开始，不超过auto-increment-increment。
这样做之后，我在这台服务器上插入的第一个id就是 1，第二行的id就是 11了，而不是2。
（同理，在第二台服务器上插入的第一个id就是2，第二行就是12，这个后面再介绍）这样就不会出现主键冲突了。后面我们会演示这个id的效果。

获取主服务器状态，和同步初态。

假设我现在有这些数据库在A上面。
如果你是全新安装的，那么不需要同步初态，直接跳过这一步，到后面直接查看主服务器状态。
这里我们假设有一个 hello 数据库作为初态。
MySQL主从、主主互备

先锁定 hello数据库：FLUSH TABLES WITH READ LOCK;

然后导出数据：
我这里只需要导出hello数据库，如果你有多个数据库作为初态的话，需要导出所有这些数据库：
MySQL主从、主主互备

然后查看A服务器的binary日志位置：
记住这个文件名和位置，等会在从服务器上会用到。
MySQL主从、主主互备

主服务器已经做完了，可以解除锁定了：UNLOCK TABLES;

设置从服务器 B 需要复制的数据库

打开从服务器 B 的 /etc/my.cnf 文件：
MySQL主从、主主互备

解释一下上面的内容:

server-id 必须保证每个服务器不一样。这可能和循环同步有关。防止进入死循环。
replicate-do-db 可以指定需要复制的数据库，我这里注掉了。演示一下。
replicate-ignore-db 复制时需要排除的数据库，我使用了，这个。除开系统的几个数据库之外，所有的数据库都复制。
relay_log 中继日志的名字。前面说到了，复制线程需要先把远程的变化拷贝到这个中继日志中，在执行。
log-slave-updates 意思是，中继日志执行之后，这些变化是否需要计入自己的binarylog。当你的B服务器需要作为另外一个服务器的主服务器的时候需要打开。就是双主互相备份，或者多主循环备份。我们这里需要，所以打开。

保存，重启mysql。

导入初态，开始同步。

把刚才从A服务器上导出的 hello.sql 导入到 B的hello数据库中，如果B现在没有hello数据库，请先创建一个，然后再导入：
创建数据库：
mysql> create database hello default charset utf8;
把hello.sql 上传到B上，然后导入：mysql -uroot -p hello < hello.sql
如果你刚才导出了多个数据库，需要把他们都一一上传导入。

开启同步, 在B服务器上执行：

 CHANGE MASTER TO 
       MASTER_HOST='192.***.***.***', 
       MASTER_USER='repl_user', 
       MASTER_PASSWORD='hj3****', 
       MASTER_LOG_FILE='mysql-bin.000004', 
       MASTER_LOG_POS=7145;

上面几个参数就不解释了,前面说过了。

重启mysql，然后查看slave线程开启了没：
MySQL主从、主主互备
注意图中的红框，两个都是Yes，说明开启成功。如果其中一个是No，那就说明不成功。需要查看mysql的错误日志。有时候密码填错了，有时候防火墙的3306没有打开。ip地址不对，等等。都会导致失败。
mysql的错误日志一般在：/usr/local/mysql/data/;文件名应该是你的机器名， hostname.err 你换成你自己的。

到这里主-从复制已经打开了。我们先来实验一下。
我们在A的数据库里面去添加数据：
MySQL主从、主主互备
我在A的 hello数据库的test表中连续插入了3条数据，注意看他们的自增长id，分别是1,11,21. 知道这是为什么吗。前面已经说过了，不懂再回去看。

我们去看一下B数据库有没有这三条数据：
打开B的数据库：
MySQL主从、主主互备

此时不要在B中修改数据。我们接着配置从B到A的复制。如果你只需要主从复制的话，到这里就结束了。后面可以不看了。所有A中的修改都能自动同步到B，但是对B的修改却不能同步到A。因为是单向的。如果需要双向同步的话，需要再做一次从B到A的复制。

主主复制

基本跟上面一样：我们简单一点介绍：

在B中创建用户

grant replication slave on *.* to 'repl_user'@'192.***.***.***' identified by 'hj34$%&mnkb';

打开 /etc/my.cnf ，开启B的binarylog

MySQL主从、主主互备
注意红框中所新添加的部分。

我们不需要导出B的初态了，因为它刚刚才从A导过来。直接记住它的master日志状态

MySQL主从、主主互备
记住这两个数值，等会在A上面要用。
B服务器就设置完了。

登录到A 服务器。开启中继：

MySQL主从、主主互备

注意框中心添加的部分，不解释了。

启动同步：

MySQL主从、主主互备
上面的ip地址是B的ip地址，因为A把B当做master了。不解释了。

然后重启mysql服务。
然后查看，slave状态是否正常：
MySQL主从、主主互备
图中出现了两个No。说明slave没有成功，即，从B到A的同步没有成功。我们去查看mysql错误日志，前面说过位置：/usr/local/mysql/data/ 查看hostname.err 文件，打开看看

看图中的error信息。说找不到中继日志文件。
这是因为我们在配置A的中继文件时改了中继文件名，但是mysql没有同步。解决办法很简单。
MySQL主从、主主互备

先停掉mysql服务。找到这三个文件，把他们删掉。 一定要先停掉mysql服务。不然还是不成功。你需要重启一下机器了。或者手动kill mysqld。
改好之后，启动mysql之后。我们在来检查一下slave状态：
MySQL主从、主主互备
完成，现在就是A<--->B主主互备啦！

深入了解复制

已经讨论了关于复制的一些基本东西，下面深入讨论一下复制。

基于语句的复制(Statement-Based Replication)

MySQL 5.0及之前的版本仅支持基于语句的复制（也叫做逻辑复制，logical replication），这在数据库并不常见。master记录下改变数据的查询，然后，slave从中继日志中读取事件，并执行它，这些SQL语句与master执行的语句一样。
这种方式的优点就是实现简单。此外，基于语句的复制的二进制日志可以很好的进行压缩，而且日志的数据量也较小，占用带宽少——例如，一个更新GB的数据的查询仅需要几十个字节的二进制日志。而mysqlbinlog对于基于语句的日志处理十分方便。

但是，基于语句的复制并不是像它看起来那么简单，因为一些查询语句依赖于master的特定条件，例如，master与slave可能有不同的时间。所以，MySQL的二进制日志的格式不仅仅是查询语句，还包括一些元数据信息，例如，当前的时间戳。即使如此，还是有一些语句，比如，CURRENT USER函数，不能正确的进行复制。此外，存储过程和触发器也是一个问题。

另外一个问题就是基于语句的复制必须是串行化的。这要求大量特殊的代码，配置，例如InnoDB的next-key锁等。并不是所有的存储引擎都支持基于语句的复制。

基于记录的复制(Row-Based Replication)

MySQL增加基于记录的复制，在二进制日志中记录下实际数据的改变，这与其它一些DBMS的实现方式类似。这种方式有优点，也有缺点。优点就是可以对任何语句都能正确工作，一些语句的效率更高。主要的缺点就是二进制日志可能会很大，而且不直观，所以，你不能使用mysqlbinlog来查看二进制日志。

对于一些语句，基于记录的复制能够更有效的工作，如：

mysql> INSERT INTO summary_table(col1, col2, sum_col3)
    -> SELECT col1, col2, sum(col3)
    -> FROM enormous_table
    -> GROUP BY col1, col2;

假设，只有三种唯一的col1和col2的组合，但是，该查询会扫描原表的许多行，却仅返回三条记录。此时，基于记录的复制效率更高。

另一方面，下面的语句，基于语句的复制更有效：

mysql> UPDATE enormous_table SET col1 = 0;

此时使用基于记录的复制代价会非常高。由于两种方式不能对所有情况都能很好的处理，所以，MySQL 5.1支持在基于语句的复制和基于记录的复制之前动态交换。你可以通过设置session变量binlog_format来进行控制。

复制相关的文件

除了二进制日志和中继日志文件外，还有其它一些与复制相关的文件。如下

mysql-bin.index

服务器一旦开启二进制日志，会产生一个与二日志文件同名，但是以.index结尾的文件。它用于跟踪磁盘上存在哪些二进制日志文件。MySQL用它来定位二进制日志文件。内容与下面类似

.\mysql-01-bin.000003
.\mysql-01-bin.000004

mysql-relay-bin.index
该文件的功能与mysql-bin.index类似，但是它是针对中继日志，而不是二进制日志。内容与下面类似

.\mysql-02-relay-bin.000017
.\mysql-02-relay-bin.000018

master.info
保存master的相关信息。不要删除它，否则，slave重启后不能连接master。内容与下面类似

mysql-01-bin.000010
286
localhost
repl
1234
3306

I/O线程更新master.info文件，内容与下面类似

.\mysql-02-relay-bin.000019
254
mysql-01-bin.000010
286
0
52813

relay-log.info
包含slave中当前二进制日志和中继日志的信息。

发送复制事件到其它slave

当设置log_slave_updates时，你可以让slave扮演其它slave的master。此时，slave把SQL线程执行的事件写进行自己的二进制日志(binary log)，然后，它的slave可以获取这些事件并执行它。如下：
MySQL主从、主主互备

复制过滤(Replication Filters)

复制过滤可以让你只复制服务器中的一部分数据，有两种复制过滤：在master上过滤二进制日志中的事件；在slave上过滤中继日志中的事件。如下：
MySQL主从、主主互备

复制的常用拓扑结构

复制的体系结构有以下一些基本原则：
(1) 每个slave只能有一个master；
(2) 每个slave只能有一个唯一的服务器ID；
(3) 每个master可以有很多slave；
(4) 如果你设置log_slave_updates，slave可以是其它slave的master，从而扩散master的更新。

MySQL不支持多主服务器复制(Multimaster Replication)——即一个slave可以有多个master。但是，通过一些简单的组合，我们却可以建立灵活而强大的复制体系结构。

1.单一master和多slave

由一个master和一个slave组成复制系统是最简单的情况。Slave之间并不相互通信，只能与master进行通信。
在实际应用场景中，MySQL复制90%以上都是一个Master复制到一个或者多个Slave的架构模式，主要用于读压力比较大的应用的数据库端廉价扩展解决方案。因为只要Master和Slave的压力不是太大（尤其是Slave端压力）的话，异步复制的延时一般都很少很少。尤其是自从Slave端的复制方式改成两个线程处理之后，更是减小了Slave端的延时问题。而带来的效益是，对于数据实时性要求不是特别Critical的应用，只需要通过廉价的pcserver来扩展Slave的数量，将读压力分散到多台Slave的机器上面，即可通过分散单台数据库服务器的读压力来解决数据库端的读性能瓶颈，毕竟在大多数数据库应用系统中的读压力还是要比写压力大很多。这在很大程度上解决了目前很多中小型网站的数据库压力瓶颈问题，甚至有些大型网站也在使用类似方案解决数据库瓶颈。
如图：
MySQL主从、主主互备

如果写操作较少，而读操作很时，可以采取这种结构。你可以将读操作分布到其它的slave，从而减小master的压力。但是，当slave增加到一定数量时，slave对master的负载以及网络带宽都会成为一个严重的问题。
这种结构虽然简单，但是，它却非常灵活，足够满足大多数应用需求。一些建议：

(1)不同的slave扮演不同的作用(例如使用不同的索引，或者不同的存储引擎)；
(2)用一个slave作为备用master，只进行复制；
(3)用一个远程的slave，用于灾难恢复；

大家应该都比较清楚，从一个Master节点可以复制出多个Slave节点，可能有人会想，那一个Slave节点是否可以从多个Master节点上面进行复制呢？至少在目前来看，MySQL是做不到的，以后是否会支持就不清楚了。
MySQL不支持一个Slave节点从多个Master节点来进行复制的架构，主要是为了避免冲突的问题，防止多个数据源之间的数据出现冲突，而造成最后数据的不一致性。不过听说已经有人开发了相关的patch，让MySQL支持一个Slave节点从多个Master结点作为数据源来进行复制，这也正是MySQL开源的性质所带来的好处。

2.主动模式的Master-Master(Master-Master in Active-Active Mode)

Master-Master复制的两台服务器，既是master，又是另一台服务器的slave。这样，任何一方所做的变更，都会通过复制应用到另外一方的数据库中。
可能有些人可能会担心，这样搭建复制环境之后，难道不会造成两台MySQL之间的循环复制么？实际上MySQL自己早就想到了这一点，所以在MySQL的BinaryLog中记录了当前MySQL的server-id，而且这个参数也是我们搭建MySQLReplication的时候必须明确指定，而且Master和Slave的server-id参数值比需要不一致才能使MySQLReplication搭建成功。一旦有了server-id的值之后，MySQL就很容易判断某个变更是从哪一个MySQLServer最初产生的，所以就很容易避免出现循环复制的情况。而且，如果我们不打开记录Slave的BinaryLog的选项（--log-slave-update）的时候，MySQL根本就不会记录复制过程中的变更到BinaryLog中，就更不用担心可能会出现循环复制的情形了。
如图：
MySQL主从、主主互备

主动的Master-Master复制有一些特殊的用处。例如，地理上分布的两个部分都需要自己的可写的数据副本。这种结构最大的问题就是更新冲突。假设一个表只有一行(一列)的数据，其值为1，如果两个服务器分别同时执行如下语句：
在第一个服务器上执行：mysql> UPDATE tbl SET col=col + 1;
在第二个服务器上执行：mysql> UPDATE tbl SET col=col * 2;
那么结果是多少呢？一台服务器是4，另一个服务器是3，但是，这并不会产生错误。
实际上，MySQL并不支持其它一些DBMS支持的多主服务器复制(Multimaster Replication)，这是MySQL的复制功能很大的一个限制(多主服务器的难点在于解决更新冲突)，但是，如果你实在有这种需求，你可以采用MySQL Cluster，以及将Cluster和Replication结合起来，可以建立强大的高性能的数据库平台。但是，可以通过其它一些方式来模拟这种多主服务器的复制。

3.主动-被动模式的Master-Master(Master-Master in Active-Passive Mode)

这是master-master结构变化而来的，它避免了M-M的缺点，实际上，这是一种具有容错和高可用性的系统。它的不同点在于其中一个服务只能进行只读操作。如图：
MySQL主从、主主互备

4.级联复制架构 Master –Slaves - Slaves

在有些应用场景中，可能读写压力差别比较大，读压力特别的大，一个Master可能需要上10台甚至更多的Slave才能够支撑注读的压力。这时候，Master就会比较吃力了，因为仅仅连上来的SlaveIO线程就比较多了，这样写的压力稍微大一点的时候，Master端因为复制就会消耗较多的资源，很容易造成复制的延时。
遇到这种情况如何解决呢？这时候我们就可以利用MySQL可以在Slave端记录复制所产生变更的BinaryLog信息的功能，也就是打开--log-slave-update选项。然后，通过二级（或者是更多级别）复制来减少Master端因为复制所带来的压力。也就是说，我们首先通过少数几台MySQL从Master来进行复制，这几台机器我们姑且称之为第一级Slave集群，然后其他的Slave再从第一级Slave集群来进行复制。从第一级Slave进行复制的Slave，我称之为第二级Slave集群。如果有需要，我们可以继续往下增加更多层次的复制。这样，我们很容易就控制了每一台MySQL上面所附属Slave的数量。这种架构我称之为Master-Slaves-Slaves架构
这种多层级联复制的架构，很容易就解决了Master端因为附属Slave太多而成为瓶颈的风险。下图展示了多层级联复制的Replication架构。
MySQL主从、主主互备
当然，如果条件允许，我更倾向于建议大家通过拆分成多个Replication集群来解决
上述瓶颈问题。毕竟Slave并没有减少写的量，所有Slave实际上仍然还是应用了所有的数据变更操作，没有减少任何写IO。相反，Slave越多，整个集群的写IO总量也就会越多，我们没有非常明显的感觉，仅仅只是因为分散到了多台机器上面，所以不是很容易表现出来。
此外，增加复制的级联层次，同一个变更传到最底层的Slave所需要经过的MySQL也会更多，同样可能造成延时较长的风险。
而如果我们通过分拆集群的方式来解决的话，可能就会要好很多了，当然，分拆集群也需要更复杂的技术和更复杂的应用系统架构。

5.带从服务器的Master-Master结构(Master-Master with Slaves)

这种结构的优点就是提供了冗余。在地理上分布的复制结构，它不存在单一节点故障问题，而且还可以将读密集型的请求放到slave上。
MySQL主从、主主互备
级联复制在一定程度上面确实解决了Master因为所附属的Slave过多而成为瓶颈的问题，但是他并不能解决人工维护和出现异常需要切换后可能存在重新搭建Replication的问题。这样就很自然的引申出了DualMaster与级联复制结合的Replication架构，我称之为Master-Master-Slaves架构
和Master-Slaves-Slaves架构相比，区别仅仅只是将第一级Slave集群换成了一台单独的Master，作为备用Master，然后再从这个备用的Master进行复制到一个Slave集群。

这种DualMaster与级联复制结合的架构，最大的好处就是既可以避免主Master的写入操作不会受到Slave集群的复制所带来的影响，同时主Master需要切换的时候也基本上不会出现重搭Replication的情况。但是，这个架构也有一个弊端，那就是备用的Master有可能成为瓶颈，因为如果后面的Slave集群比较大的话，备用Master可能会因为过多的SlaveIO线程请求而成为瓶颈。当然，该备用Master不提供任何的读服务的时候，瓶颈出现的可能性并不是特别高，如果出现瓶颈，也可以在备用Master后面再次进行级联复制，架设多层Slave集群。当然，级联复制的级别越多，Slave集群可能出现的数据延时也会更为明显，所以考虑使用多层级联复制之前，也需要评估数据延时对应用系统的影响。

转载于:https://my.oschina.net/itlzm/blog/1921972

上一篇： MySQL备份与主备配置

下一篇： elf，基于flexbox的响应式CSS框架

MySQL主从、主主互备

Docker部署MySQL主/从复制集群搭建

mysql 主主互备

mysql 备份工作原理

mysql 双机热备实战

主从复制

在A上面创建专门用于备份的用户

开启主服务器的 binarylog。

获取主服务器状态，和同步初态。

设置从服务器 B 需要复制的数据库

导入初态，开始同步。

主主复制

在B中创建用户

打开 /etc/my.cnf ，开启B的binarylog

我们不需要导出B的初态了，因为它刚刚才从A导过来。直接记住它的master日志状态

登录到A 服务器。开启中继：

启动同步：

深入了解复制

基于语句的复制(Statement-Based Replication)

基于记录的复制(Row-Based Replication)

复制相关的文件

发送复制事件到其它slave

复制过滤(Replication Filters)

复制的常用拓扑结构

1.单一master和多slave

2.主动模式的Master-Master(Master-Master in Active-Active Mode)

3.主动-被动模式的Master-Master(Master-Master in Active-Passive Mode)

4.级联复制架构 Master –Slaves - Slaves

5.带从服务器的Master-Master结构(Master-Master with Slaves)

Linux下安装Mysql多实例作为数据备份服务器实现多主到一从多实例的备份

详解mysql集群：一主多从架构实现

MYSQL主从同步/主主同步

MySQL5.7.18主从复制搭建(一主一从)教程详解

mysql 主主从配置

Heartbeat、haproxy及MySQL双主复制实现读写负载均衡及高可用详细教程

MySQL 5.7传统复制到GTID在线切换（一主一从）

详解mysql集群：一主多从架构实现

Mysql主主配置

mysql互为主从(双主)配置

MySQL主从、主主互备

Docker部署MySQL主/从复制集群搭建

mysql 主主互备

mysql 备份工作原理

mysql 双机热备实战

主从复制

在A上面创建专门用于备份的用户

开启主服务器的 binarylog。

获取主服务器状态， 和同步初态。

设置从服务器 B 需要复制的数据库

导入初态， 开始同步。

主主复制

在B中创建用户

打开 /etc/my.cnf ， 开启B的binarylog

我们不需要导出B的初态了，因为它刚刚才从A导过来。 直接记住它的master日志状态

登录到A 服务器。 开启中继：

启动同步：

深入了解复制

基于语句的复制(Statement-Based Replication)

基于记录的复制(Row-Based Replication)

复制相关的文件

发送复制事件到其它slave

复制过滤(Replication Filters)

复制的常用拓扑结构

1.单一master和多slave

2.主动模式的Master-Master(Master-Master in Active-Active Mode)

3.主动-被动模式的Master-Master(Master-Master in Active-Passive Mode)

4.级联复制架构 Master –Slaves - Slaves

5.带从服务器的Master-Master结构(Master-Master with Slaves)

Linux下安装Mysql多实例作为数据备份服务器实现多主到一从多实例的备份

详解mysql集群：一主多从架构实现

MYSQL主从同步/主主同步

MySQL5.7.18主从复制搭建(一主一从)教程详解

mysql 主主从配置

Heartbeat、haproxy及MySQL双主复制实现读写负载均衡及高可用详细教程

MySQL 5.7传统复制到GTID在线切换（一主一从）

详解mysql集群：一主多从架构实现

Mysql主主配置

mysql互为主从(双主)配置

获取主服务器状态，和同步初态。

导入初态，开始同步。

打开 /etc/my.cnf ，开启B的binarylog

我们不需要导出B的初态了，因为它刚刚才从A导过来。直接记住它的master日志状态

登录到A 服务器。开启中继：