MongoDB 副本集(Replica Set)
2021/11/23 2:14:30
本文主要是介绍MongoDB 副本集(Replica Set),对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
副本集(Replica Set)
副本集概念
此集群拥有一个主节点(Master)和多个从节点(Slave),与主从复制模式类似,但是副本集与主从复制的区别在于:当集群中主节点发生故障时,副本集可以自动投票,选举出新的主节点,并引导其余的从节点连接新的主节点。
**MongoDB 的副本集是自带故障恢复功能的主从复制 **
副本集作用
- 异地备份(数据冗余)
- 故障转移(服务冗余)
- 负载均衡(读写分类)
- 高可用基石(HA)
副本集角色
-
主节点(Primary)
Primary 是副本集的主节点,可读写,唯一可以进行写操作的节点,由集群自行选举出来 -
副本节点(Secondary)
Seconary 会参与 Primary 选举,并从 Primary 同步最新写入的数据,以保证与 Primary 存储相同的数据(Seconary 默认不提供读写服务)
-
仲裁者(Arbiter)
Arbiter 节点只参与投票,不能被选为 Primary,并且不从 Primary 同步数据
副本集数据同步原理
-
intial sync(全量同步)
- 全量同步开始,设置 minvalid 集合的 _initialSyncFlag 字段为 true
- 获取主节点上的当前最新 oplog 时间戳
- 同步集合数据并建立索引(比较耗时)
- 获取主节点上的当前最新的 oplog 时间戳
- 读取两个 oplog 时间戳段内的 oplog 并重放
- 全量同步结束,设置 minvalid 集合的 _initialSyncFlag 字段为 false
-
Replication(增量同步)
全量同步结束后,从节点不断的从主节点拉取 oplog 并重放应用到自身,这个过程并不是由一个线程来完成的,mongodb 为了提升同步效率,将拉取 oplog 以及重放 oplog 分到了不同的线程来执行。
- producer 线程:该线程不断的从主节点上拉取 oplog,并加入到一个 BlockQueue 的队列里保存着,BlockQueue 最大存储 240MB 的 oplog 数据,当超过这个阈值时,就必须等到 oplog 被 replBatcher 消费掉才能继续拉取
- replBatcher 线程:该线程负责逐个从 producer 线程的队列里取出 oplog,并放到自己维护的队列里,这个队列最多允许 5000 个元素,并且元素总大小不超过 512 MB,当队列满了时,就需要等待 oplogApplication 线程消费掉
- oplogApplication 线程:该线程会取出 replBatch 线程当前队列的所有元素,并将元素根据集合名称分散到不同的replWriter 线程(默认16个)
- replWriter 线程:该线程将所有的 oplog 进行回放;
- 等待所有 oplog 都回放完毕,最终 oplogApplication 线程将所有的 oplog 顺序写入到一个集合中,完成增量同步
副本集心跳检测
- 副本集创建成功后,每一个节点之间都保持着通信,即每 2s 会向整个副本集的其他节点发一次心跳检测 ping 命令
- 副本集中每一个节点的数据库内部,维护着整个副本集节点的状态信息,一旦某一个节点超过 10s 不能收到 ping 命令的响应,就认为这个节点不能访问
- 副本集中的主节点除了维护整体副本集节点状态信息外,还要判断是否和大多数节点可以正常通信,如果不能则要主动降级(只读状态)
副本集 Primary 选举场景
需要进行 Primary 选举的场景如下:
- 副本集初始化
- 副本集被 reconfig
- Primary 节点宕机
- Primary 节点主动 stepDown(主动降级为Secondary)
副本集 Primary 选举规则
-
每一个副本集节点根据自己维护的节点状态信息,如果判断出整个副本集没有主节点,而且本身具备升主节点条件,则会引发一次投票选举
-
投票发起者向副本集成员发起 Elect 请求,成员在收到请求后经过会一系列检查,如果通过检查则为发起者投一票
检查条件如下:
- 在所有有效的副本集节点中它持有最新的 optime 时间戳
- Priority 优先级最高(默认1)
- 先发先得选票
-
如果投票发起者获得超过半数(初始化时整个副本集节点的数量的一半)的投票,则选举通过成为 Primary 节点,否则重新发起投票
-
所有成员都可以投否决票,否决票具有一票否决权,所以一般可以认为只要有成员反对,则发起选举节点将不能成为 Primary
投否决票一般需要判断以下三个条件:
- 副本集中是否有其他节点已经是 Primary
- 本节点的数据是否比请求成为主节点的数据更新(optime 时间戳)
- 其他节点的数据是否比请求成为主节点的数据更新(optime 时间戳)
注:如果以上任意一个条件满足,则会停止选举过程;原计划升为主节点将仍旧保持 Secondary 状态
官方推荐副本集的成员数量为奇数,且至少副本集包含 3 个节点
这篇关于MongoDB 副本集(Replica Set)的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-12-24MongoDB资料:新手入门完全指南
- 2024-12-20go-zero 框架的 RPC 服务 启动start和停止 底层是怎么实现的?-icode9专业技术文章分享
- 2024-12-19Go-Zero 框架的 RPC 服务启动和停止的基本机制和过程是怎么实现的?-icode9专业技术文章分享
- 2024-12-18怎么在golang中使用gRPC测试mock数据?-icode9专业技术文章分享
- 2024-12-15掌握PageRank算法核心!你离Google优化高手只差一步!
- 2024-12-15GORM 中的标签 gorm:"index"是什么?-icode9专业技术文章分享
- 2024-12-11怎么在 Go 语言中获取 Open vSwitch (OVS) 的桥接信息(Bridge)?-icode9专业技术文章分享
- 2024-12-11怎么用Go 语言的库来与 Open vSwitch 进行交互?-icode9专业技术文章分享
- 2024-12-11怎么在 go-zero 项目中发送阿里云短信?-icode9专业技术文章分享
- 2024-12-11怎么使用阿里云 Go SDK (alibaba-cloud-sdk-go) 发送短信?-icode9专业技术文章分享