mongodb高可用架构

https://www.mongodb.com/docs/manual/tutorial/deploy-replica-set/

复制是跨多个服务器同步数据的过程。

复制提供冗余,并通过不同数据库服务器上的多个数据副本增加数据可用性。

复制保护数据库免受单个服务器的丢失。

复制还允许从硬件故障和服务中断中恢复。

使用其他数据副本,可以将其专用于灾难恢复,报告或备份。

为什么复制?

  • 保持数据安全
  • 数据的高可用性(24 * 7)
  • 灾难恢复
  • 维护无停机(如备份,索引重建,压缩)
  • 读取缩放(额外的副本可读)
  • 副本集对应用程序是透明的

副本集角色

主节点、读写
副本节点、同步主节点数据
仲裁节点、非必须、不存储数据,不竞主,只投票

什么是副本集

MongoDB通过使用副本集来实现复制。

副本集是托管相同数据集的一组 mongod 实例。

在一个副本中,一个节点是接收所有写操作的主节点。

所有其他实例(例如辅助节点)都应用主节点的操作,以便它们具有相同的数据集。

副本集可以只有一个主节点。

  • 副本集是一组两个或多个节点(通常最少需要3个节点)。
  • 在副本集中,一个节点是主节点,其余节点是次要节点。
  • 所有数据从主节点复制到辅助节点。
  • 在自动故障切换或维护时,选择为主节点建立,并选择新的主节点。
  • 恢复故障节点后,它再次加入副本集,并作为辅助节点。

显示了MongoDB复制的典型图,客户端应用程序始终与主节点进行交互,然后主节点将数据复制到辅助节点。

部署副本集



mkdir -p /opt/mongo_2801{7,8,9}/{conf,log,pid}
mkdir -p /data/mongo_2801{7,8,9} cat >/opt/mongo_28017/conf/mongodb.conf <<EOF
systemLog:
destination: file
logAppend: true
path: /opt/mongo_28017/log/mongodb.log storage:
journal:
enabled: true
dbPath: /data/mongo_28017
directoryPerDB: true
wiredTiger:
engineConfig:
cacheSizeGB: 0.5
directoryForIndexes: true
collectionConfig:
blockCompressor: zlib
indexConfig:
prefixCompression: true processManagement:
fork: true
pidFilePath: /opt/mongo_28017/pid/mongod.pid net:
port: 28017
bindIp: 127.0.0.1,10.0.0.17 replication: # 开启主从复制
oplogSizeMB: 1024 # 类似binlog日志的大小单位,1GB
replSetName: dba # 副本集名
EOF # 复制3个实例,区分端口号
cp /opt/mongo_28017/conf/mongodb.conf /opt/mongo_28018/conf/
cp /opt/mongo_28017/conf/mongodb.conf /opt/mongo_28019/conf/ # 启动3个mongodb实例
sed -i 's#28017#28018#g' /opt/mongo_28018/conf/mongodb.conf
sed -i 's#28017#28019#g' /opt/mongo_28019/conf/mongodb.conf
mongod -f /opt/mongo_28017/conf/mongodb.conf
mongod -f /opt/mongo_28018/conf/mongodb.conf
mongod -f /opt/mongo_28019/conf/mongodb.conf # 检查3个实例
ps -ef|grep mongo
netstat -lntup|grep mongo

登录mongo副本集

1. 修改配置文件,以副本集模式启动多实例

2. 初始化副本集 28017 作为主节点
https://www.mongodb.com/docs/manual/tutorial/deploy-replica-set/#initiate-the-replica-set mongo --port 28017 # 只需要在一个节点执行,其他节点自动加入 rs.initiate(
{
_id: "dba",
version: 1,
members: [
{ _id: 0, host : "10.0.0.17:28017" },
{ _id: 1, host : "10.0.0.17:28018" },
{ _id: 2, host : "10.0.0.17:28019" }
]
}
)

该方法是官网推荐的模式,存在选举时间

查看副本集状态

rs.status()
# rs是管理集群的命令

从库开启slve


不开启会提示报错,读的权限都没用,slave状态不正确 dba:SECONDARY> show dbs;
2022-10-17T17:11:47.201+0800 E QUERY [js] uncaught exception: Error: listDatabases failed:{
"operationTime" : Timestamp(1665997900, 1),
"ok" : 0,
"errmsg" : "not master and slaveOk=false",
"code" : 13435,
"codeName" : "NotPrimaryNoSecondaryOk",
"$clusterTime" : {
"clusterTime" : Timestamp(1665997900, 1),
"signature" : {
"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
"keyId" : NumberLong(0)
}
}
} :
_getErrorWithCode@src/mongo/shell/utils.js:25:13
Mongo.prototype.getDBs/<@src/mongo/shell/mongo.js:147:19
Mongo.prototype.getDBs@src/mongo/shell/mongo.js:99:12
shellHelper.show@src/mongo/shell/utils.js:906:13
shellHelper@src/mongo/shell/utils.js:790:15
@(shellhelp2):1:1
dba:SECONDARY>

开启方式

echo "rs.slaveOk()" > ~/.mongorc.js

测试副本集

主库写入数据

dba:PRIMARY> db.myblog.insertOne({"website":"www.yuchaoit.cn"})
{
"acknowledged" : true,
"insertedId" : ObjectId("634d1c065705b0c66b18384a")
}
dba:PRIMARY> show dbs;
admin 0.000GB
config 0.000GB
local 0.000GB
test 0.000GB
dba:PRIMARY> db.myblog.find()
{ "_id" : ObjectId("634d1c065705b0c66b18384a"), "website" : "www.yuchaoit.cn" }
dba:PRIMARY>

从库只读权限

副本集常用命令

rs.config()
rs.status()
rs.isMaster()
dba:PRIMARY> rs.printReplicationInfo()
configured oplog size: 1024MB
log length start to end: 1430secs (0.4hrs)
oplog first event time: Mon Oct 17 2022 16:53:20 GMT+0800 (CST)
oplog last event time: Mon Oct 17 2022 17:17:10 GMT+0800 (CST)
now: Mon Oct 17 2022 17:17:13 GMT+0800 (CST)
dba:PRIMARY> 查看从库信息
dba:PRIMARY> rs.printSlaveReplicationInfo()
WARNING: printSlaveReplicationInfo is deprecated and may be removed in the next major release. Please use printSecondaryReplicationInfo instead.
source: 10.0.0.17:28018
syncedTo: Mon Oct 17 2022 17:17:20 GMT+0800 (CST)
0 secs (0 hrs) behind the primary
source: 10.0.0.17:28019
syncedTo: Mon Oct 17 2022 17:17:20 GMT+0800 (CST)
0 secs (0 hrs) behind the primary
dba:PRIMARY> # 最新命令 dba:PRIMARY> rs.printSecondaryReplicationInfo()
source: 10.0.0.17:28018
syncedTo: Mon Oct 17 2022 17:17:37 GMT+0800 (CST)
0 secs (0 hrs) behind the primary
source: 10.0.0.17:28019
syncedTo: Mon Oct 17 2022 17:17:37 GMT+0800 (CST)
0 secs (0 hrs) behind the primary
dba:PRIMARY>

副本集故障转移

1. 关闭主库
[root chaoge-linux /data/mongo_27017]#mongod -f /opt/mongo_28017/conf/mongodb.conf --shutdown
killing process with pid: 9492 ## 2.查看副本集信息
rs.status()
rs.config() 3.查看新的复制关系

新的主从关系

从库权重调整

了解即可

myconfig=rs.conf()
myconfig.members[0].priority=100 // 选择第几个成员,设置优先级
rs.reconfig(myconfig) // 重新加载配置 # 主动降级优先级,从主库,降到从库
rs.stepDown() # 恢复配置
myconfig=rs.conf()
myconfig.members[0].priority=1
rs.reconfig(myconfig)

增加节点

增加节点和删除节点
1.创建新节点
mkdir -p /opt/mongo_28010/{conf,log,pid}
mkdir -p /data/mongo_28010
cp /opt/mongo_28017/conf/mongodb.conf /opt/mongo_28010/conf/
sed -i 's#28017#28010#g' /opt/mongo_28010/conf/mongodb.conf
mongod -f /opt/mongo_28010/conf/mongodb.conf
mongo --port 28010 2.集群加入新节点,只能在主库加
rs.add("10.0.0.17:28010") 3.删除节点
rs.remove("10.0.0.17:28010")

副本集replicaSet的更多相关文章

  1. k8s初面考点ReplicaSet副本集极限9连击你懂了吗?

    k8s初面考点ReplicaSet副本集极限9连击你懂了吗? k8s考点灵魂拷问9连击 考点之简单描述一下k8s副本集ReplicaSet有什么作用? 考点之为什么ReplicaSet将取代Repli ...

  2. mongodb配置副本集(多台服务器间的副本集搭建) replica[ˈrɛplɪkə]

    副本集具有多个副本保证了容错性,就算一个副本挂掉了还有很多副本存在,并且解决了“主节点挂掉了,整个集群内会自动切换”的问题.我们来看看mongoDB副本集的架构图: 由图可以看到客户端连接到整个副本集 ...

  3. spring配置mongodb连接副本集多个节点

    mongodb版本3.4.x 1.配置副本集 先配置副本集,可参考我之前写的文章:http://blog.csdn.net/fuck487/article/details/78287362 注意:必须 ...

  4. MongoDB学习笔记——Replica Set副本集

    副本集 可以将MongoDB中的副本集看作一组服务器集群由一个主节点和多个副本节点等组成,相对于之前讲到的主从复制提供了故障自动转移的功能 副本集实现数据同步的方式依赖于local数据库中的oplog ...

  5. MongoDB 副本集的原理、搭建、应用

    概念: 在了解了这篇文章之后,可以进行该篇文章的说明和测试.MongoDB 副本集(Replica Set)是有自动故障恢复功能的主从集群,有一个Primary节点和一个或多个Secondary节点组 ...

  6. 修改mongodb3.0副本集用户密码遇到的坑

    最近公司对项目安全方面的问题很是重视,进行了多次各种安全漏洞的扫描,于是乎就扫到了mongodb弱口令的问题. 在项目部署初期,因为大家对这个都不是特别重视,大概是因为觉得反正是内网项目吧,所以mon ...

  7. mongo(五)副本集

    mongo(五)副本集 配置文件 1-3为三个存储节点,其实一个为Primary,两个secondary作为备份,4为仲裁节点 # mongod.conf #where to log logpath= ...

  8. Mongodb3.0.5副本集搭建及spring和java连接副本集配置

    这是去年写的一篇文档,最近突然发现并没有发不出来,因此现在补上,希望能对某些朋友有所帮助.因为当时记录时没有截图,因此这里看起来可能就比较单调. 一.基本环境: mongdb3.0.5数据库 spri ...

  9. Mongodb4.0副本集构建

    目前最新的mongodb4.0.2已经支持事务这个重要特性,需要使用的话必须是复制或副本集,这是第一篇先研发如何构建副本集,因为副本集是目前最低成本的高可用群集方式. 1.准备三台服务器,本次使用是的 ...

  10. MongoDB副本集功能及节点属性梳理

    副本集的主要功能 副本集是MongoDB高可用的基础,其主要作用 归纳为以下几点: (1)高可用,防止设备(服务器.网络)故障.提供自动FailOver功能. (2)无需配置高可用性虚拟节点:无论是S ...

随机推荐

  1. 一文读懂 BizDevOps:数字化转型下的技术破局

    简介: 目标.方法与实践. 我们正迈向数字经济时代,数字化转型成为普遍行动.未来绝大多数业务都将运行在数字基座之上,软件系统成为业务创新和发展的核心引擎.在这一趋势下,产品研发的交付能力面临巨大挑战, ...

  2. 【Serverless实战】B站每日自动签到&&传统单节点网站的Serverless上云

    简介: Serverless好哇!这里将针对个人与生产两个应用方向的测评 使用Serverless实现自动获取每日B站的经验值,让你更快冲到LV6! 你的业务站点还是一台服务器All in One吗? ...

  3. SpringCloud 应用在 Kubernetes 上的最佳实践 —— 高可用(弹性伸缩)

    作者 | 三未 前言 弹性伸缩是一种为了满足业务需求.保证服务质量.平衡服务成本的重要应用管理策略.弹性伸缩让应用的部署规模能够根据实时的业务量产生动态调整,在业务高峰期扩大部署规模,保证服务不被业务 ...

  4. Kubernetes 稳定性保障手册:洞察+预案

    简介: 稳定性保障是个复杂的话题,需要有效.可迭代.可持续保障集群的稳定性,系统性的方法或许可以解决该问题. 作者 | 悟鹏来源 | 阿里巴巴云原生公众号 <Kubernetes 稳定性保障手册 ...

  5. [FAQ] 你所看过的 APP 流氓提示语有哪些

    分享案例来自产品:网抑云. 当你要进行一些常规操作,比如评论时,进行弹窗伺候: |----------------------| |       | |   为提高您的账号安全性,请先绑定手机号   ...

  6. vue使用websoket(非封装)

    上代码: create:function(){ this.initWebpack() } methods:{ initWebpack(){//初始化websocket           let us ...

  7. 快速搭建Zookeeper和Kafka环境

    前言 由于项目需要涉及到zookeeper和Kafka的使用,快速做了一篇笔记,方便小伙伴们搭建环境. zookeeper 官方定义 What is ZooKeeper? ZooKeeper is a ...

  8. 【爬虫实战】用python爬今日头条热榜TOP50榜单!

    目录 一.爬取目标 二.爬取结果 三.代码讲解 四.技术总结 五.演示视频 六.附完整源码 一.爬取目标 您好!我是@马哥python说,一名10年程序猿. 今天分享一期爬虫案例,爬取的目标是:今日头 ...

  9. rails 之下载

    控制器 def index #传给前端展示层当前的id @id = 6 end # http://127.0.0.1:3000/admin/category_statistics/export_tab ...

  10. Threading Programming Guide:One

    苹果支持的产生线程的方式 Operation Object 使用OperationQueue,具体可以参考:Concurrency Programming Guide GCD 使用诸如dispatch ...