Mongodb集群架构之副本集架构

 本文介绍了热门的nosql数据库mongodb的副本集这种分布式架构的一些概念和操作。主要内容包括：

mongodb副本集相关概念

mongodb副本集环境搭建

mongodb副本集的读写分离

mongodb副本集的故障转移

mongodb副本集的优点

mongodb副本集的缺点

 

1.副本集相关概念

主节点。

在一个副本集中，只有唯一一个主节点。主节点可以进行数据的写操作和读操作。副本集中各个节点的增伤改等配置必须在主节点进行。

 

从节点。

在一个副本集中，可以有一个或者多个从节点。从节点只允许读操作，不允许写操作。在主节点宕机后，会自动在从节点中产生一个新的主节点。

 

仲裁者。

在一个副本集中，仲裁者节点不保存数据，既不能读数据，也不能写数据。作用仅仅限于在从从节点选举主节点时担任仲裁作用。

 

副本集的工作原理。

（i）副本集中的主节点的oplog集合中记录了主节点中所有引起数据变化的变更操作，包括更新和插入数据。副本集中的从节点从主节点的oplog集合中复制这些操作，从而在从节点上重现这些操作。这就是副本集的数据同步的基本原理。

（ii）在 oplog集合中的每个记录都是有一个时间戳，从节点据此判断需要更新哪些数据。主节点的local数据库中的数据不会被复制到从节点上。

（iii）对于主节点而言，这些复制操作时异步进行的，相当于mysql数据库中的异步复制模式，即主节点在写入数据时无需等待任何从节点复制操作完成，即可进行其它数据的写入操作。

（iv）从节点第1次同步时会做完整的数据同步，后续通常只做一部分最新数据的同步工作。当时当从节点复制延迟太大时会重新进行完整的数据同步。因为oplog集合是一个固定集合，即里面的文档数量的大小是有固定的限制的，不能超过某个大小。因此，当主节点上oplog集合写满了后，会清空这个oplog集合。如果在写满oplog之前，从节点没有跟上这个速度，则无法再利用oplog进行增量复制工作，这就是需要完整的数据同步的原因。

 

（v）数据回滚。

在主节点宕机后自动产生了新的主节点，这时整个副本集认为这个新的主节点的数据是最新的有效数据。如果其他从节点中的数据复制进度超过了这个心的主节点的进度，那么这些从节点将会自动回滚这些超过新主节点的数据。这个操作就是mongodb中的数据回滚。

 

2.副本集环境搭建

现在通过在一台机器(centos7)上部署三个mongodb节点，从而搭建一个最简单的mongodb副本集环境。

端口27017 主节点

端口27018  从节点

端口27019 仲裁节点

 

假定mongodb相关软件包已经安装完毕。

（1）首先建立如下图的目录结构，其中data和log都是空目录。

图1

 

建立如下所示的脚本文件，用于快速启动这3个节点。

图2

 

启动3个节点。

图3

 

配置副本集。

连接到主节点27017上，然后初始化副本集并且将另外的一个从节点27018和一个仲裁者节点27019加入到副本集中。

 

图4

 

查看副本集状态。

replset1:primary> rs.status();

{

"set" : "replset1",

"date" : isodate("2018-10-01t04:14:17.567z"),

"mystate" : 1,

"term" : numberlong(1),

"syncingto" : "",

"syncsourcehost" : "",

"syncsourceid" : -1,

"heartbeatintervalmillis" : numberlong(2000),

"optimes" : {

"lastcommittedoptime" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

},

"readconcernmajorityoptime" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

},

"appliedoptime" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

},

"durableoptime" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

}

},

"laststablecheckpointtimestamp" : timestamp(1538367228, 4),

"members" : [

{

"_id" : 0,

"name" : "11.1.1.11:27017",

"health" : 1,

"state" : 1,

"statestr" : "primary",

"uptime" : 260,

"optime" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

},

"optimedate" : isodate("2018-10-01t04:14:13z"),

"syncingto" : "",

"syncsourcehost" : "",

"syncsourceid" : -1,

"infomessage" : "could not find member to sync from",

"electiontime" : timestamp(1538367226, 2),

"electiondate" : isodate("2018-10-01t04:13:46z"),

"configversion" : 3,

"self" : true,

"lastheartbeatmessage" : ""

},

{

"_id" : 1,

"name" : "11.1.1.11:27018",

"health" : 1,

"state" : 2,

"statestr" : "secondary",

"uptime" : 14,

"optime" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

},

"optimedurable" : {

"ts" : timestamp(1538367253, 1),

"t" : numberlong(1)

},

"optimedate" : isodate("2018-10-01t04:14:13z"),

"optimedurabledate" : isodate("2018-10-01t04:14:13z"),

"lastheartbeat" : isodate("2018-10-01t04:14:17.405z"),

"lastheartbeatrecv" : isodate("2018-10-01t04:14:16.418z"),

"pingms" : numberlong(0),

"lastheartbeatmessage" : "",

"syncingto" : "11.1.1.11:27017",

"syncsourcehost" : "11.1.1.11:27017",

"syncsourceid" : 0,

"infomessage" : "",

"configversion" : 3

},

{

"_id" : 2,

"name" : "11.1.1.11:27019",

"health" : 1,

"state" : 7,

"statestr" : "arbiter",

"uptime" : 4,

"lastheartbeat" : isodate("2018-10-01t04:14:17.405z"),

"lastheartbeatrecv" : isodate("2018-10-01t04:14:17.424z"),

"pingms" : numberlong(0),

"lastheartbeatmessage" : "",

"syncingto" : "",

"syncsourcehost" : "",

"syncsourceid" : -1,

"infomessage" : "",

"configversion" : 3

}

],

"ok" : 1,

"operationtime" : timestamp(1538367253, 1),

"$clustertime" : {

"clustertime" : timestamp(1538367253, 1),

"signature" : {

"hash" : bindata(0,"aaaaaaaaaaaaaaaaaaaaaaaaaaa="),

"keyid" : numberlong(0)

}

}

}

副本集中三个节点的状态应该是：

 

端口

节点

状态

 

27017

主节点

1，primary

 

27018

从节点

2，secondary

 

27019

仲裁节点

7，arbiter

 

3.副本集的读写分离

在mongodb副本集中，主节点负责数据的全部写入操作，也可以读取数据。从节点只能读取数据，而仲裁节点不能读和写数据。

因此，在主节点27017上可以进行数据的读取和写入操作。

 

图5

 

 

但是这个时候从节点上并没有真正的成为这个副本集的正式成员。在从节点执行任何有关数据的操作将会产生一个错误：

图6

 

只需要在从节点上执行一下这个而操作即可解决问题：

 

图7

 

图8

 

在仲裁者节点上同样需要执行类似的操作，但是仲裁者节点是不保存副本集中的数据的。

图9

 

在从节点或者仲裁者节点上写入数据将会失败。

图10

 

4.副本集的故障转移

现在通过将副本集中的主节点27017节点停止运行来演示mongodb副本集的故障转移功能。

（1）停止主节点27017。

图1

图11

查看节点状态。

此时原来的主节点27017处于不可用状态，而原来的从节点27018节点成为了新的主节点。

图12

 

三个节点的新状态如下所示：

端口

节点

状态

 

27017

主节点

8，(not reachable/healthy)

 

27018

从节点

1，primary

 

27019

仲裁节点

7，arbiter

 

因为27018节点成为了新的主节点，因此可以进行写数据的操作了。

图13

 

在重新启动27017节点后发现这个原来的主节点成为了从节点。

图14

至此，mongodb的副本集方式的集群部署成功。

 

4.副本集的优点

（1）部署简单。

mongodb的副本集方式的集群，相对于mysql的mha或者mm方式的集群而言，部署方面简单，仅仅使用mongodb官方软件的内置功能进行安装部署，不需要第三方的脚本或者软件即可完成部署。

 

（2）故障转移后，主节点的ip地址发生变化。因此需要客户端程序来处理这种ip变化。mongodb的java客户端 sdk正好提供了这种功能，因此只需要将一个副本集中的主节点和全部从节点都加入到连接地址中即可自动完成这种读写分离和故障转移的功能，即不需要程序员自己写代码来检测和判断副本集中节点的状态。

mongodb的副本集的java sdk和redis cluster的java sdk对于故障转移的自动化处理方式，都相当的人性化。

 

5.副本集的缺点

mongodb的副本集方式的集群架构有如下的缺点：

（1）整个集群中只有一个主节点。因此写操作集中于某一个节点上，无法进行对写操作的负载均衡。