MongoDB的集群模式--Replica Set

一、Replica Set 集群分为两种架构：

奇数个节点构成Replica Set，所有节点拥有数据集。最小架构: 1个Primary节点，2个Secondary节点

偶数个节点 + 一个仲裁节点构成的Replica Set，节点拥有数据集，仲裁节点仅参与仲裁选举出Primary节点。最小架构：1个Primary节点，1个Secondary节点，1个Arbiter节点

接下来就以3台服务器为例，部署具有仲裁的框架。

IP地址	操作系统版本	MongoDB版本	端口	功能
10.10.18.10	Centos7.5	4.0	27017	Primary
10.10.18.11	Centos7.5	4.0	27017	Secondary
10.10.18.12	Centos7.5	4.0	27017	Arbiter

二、安装部署（请访问 "MongoDB安装"）

Primary的配置文件：

systemLog:

   destination: file

   path: "/data/mongodb/log/mongod.log"

   logAppend: true

storage:

   dbPath: "/data/mongodb/data"

   journal:

      enabled: true

   wiredTiger:

      engineConfig:

        cacheSizeGB:

processManagement:

   fork: true

   pidFilePath: "/data/mongodb/pid/m.pid"

net:

   bindIp: 10.10.18.10

   port:

replication:

   replSetName: "rs0"

Secondary的配置文件

systemLog:

   destination: file

   path: "/data/mongodb/log/mongod.log"

   logAppend: true

storage:

   dbPath: "/data/mongodb/data"

   journal:

      enabled: true

   wiredTiger:

      engineConfig:

        cacheSizeGB:

processManagement:

   fork: true

   pidFilePath: "/data/mongodb/pid/m.pid"

net:

   bindIp: 10.10.18.11

   port: 
replication:

   replSetName: "rs0"

Arbiter的配置文件

systemLog:

   destination: file

   path: "/data/mongodb/log/mongod.log"

   logAppend: true

storage:

   dbPath: "/data/mongodb/data"

   journal:

      enabled: true

   wiredTiger:

      engineConfig:

        cacheSizeGB:

processManagement:

   fork: true

   pidFilePath: "/data/mongodb/pid/m.pid"

net:

   bindIp: 10.10.18.12

   port: 
replication:

   replSetName: "rs0"

启动三台服务器上的mongdb

mongod -f /data/mongodb/mongod.conf

关闭进程

 mongod -f /data/mongodb/mongod.conf --shutdown

三、配置Replica Set

登录三台服务器中任意一台，登录mongo（如果报错就将配置文件中：security 内容暂时先去掉）

mongo --host 10.10.18.10

>cfg={ _id:"rs0",members:[{_id:,host:'10.10.18.10:27017',priority:},{_id:,host:'10.10.18.11:27017',priority:},{_id:,host:'10.10.18.12:27017',arbiterOnly:true}] };

>rs.initiate(cfg)

查看Replica Set配置

> rs.conf()

{
"_id" : "rs0",
"version" : 1,
"protocolVersion" : NumberLong(1),
"writeConcernMajorityJournalDefault" : true,
"members" : [
{
"_id" : 0,
"host" : "10.10.18.10:27017",
"arbiterOnly" : false,
"buildIndexes" : true,
"hidden" : false,
"priority" : 1,
"tags" : {

},
"slaveDelay" : NumberLong(0),
"votes" : 1
},
{
"_id" : 1,
"host" : "10.10.18.11:27017",
"arbiterOnly" : false,
"buildIndexes" : true,
"hidden" : false,
"priority" : 1,
"tags" : {

},
"slaveDelay" : NumberLong(0),
"votes" : 1
},
{
"_id" : 2,
"host" : "10.10.18.12:27017",
"arbiterOnly" : true,
"buildIndexes" : true,
"hidden" : false,
"priority" : 0,
"tags" : {

},
"slaveDelay" : NumberLong(0),
"votes" : 1
}
],
"settings" : {
"chainingAllowed" : true,
"heartbeatIntervalMillis" : 2000,
"heartbeatTimeoutSecs" : 10,
"electionTimeoutMillis" : 10000,
"catchUpTimeoutMillis" : -1,
"catchUpTakeoverDelayMillis" : 30000,
"getLastErrorModes" : {

},
"getLastErrorDefaults" : {
"w" : 1,
"wtimeout" : 0
},
"replicaSetId" : ObjectId("5cff76e5e57e23a5bc7054e2")
}
}

四、验证Replica Set

在Primary中插入数据

rs0:PRIMARY>  show dbs

admin   .000GB

config  .000GB

local   .000GB

rs0:PRIMARY> db.users.insertOne(

... {

... name:"sue",

... age: ,

... status:"pending"

... })

{

        "acknowledged" : true,

        "insertedId" : ObjectId("5cff79e8993e70290a081d04")

}

rs0:PRIMARY> db.users.find()
{ "_id" : ObjectId("5cff79e8993e70290a081d04"), "name" : "sue", "age" : 26, "status" : "pending" }

在Secondary中，默认是不允许读

rs0:SECONDARY> db.users.find()

Error: error: {

        "operationTime" : Timestamp(, ),

        "ok" : ,

        "errmsg" : "not master and slaveOk=false",

        "code" : ,

        "codeName" : "NotMasterNoSlaveOk",

        "$clusterTime" : {

                "clusterTime" : Timestamp(, ),

                "signature" : {

                        "hash" : BinData(,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),

                        "keyId" : NumberLong()

                }

        }

}

五、创建用户

六、故障模拟

停止Primary上的mongo进程，在Secondary上登录mongo查看

mongo --host 10.10.18.11

rs0:PRIMARY> db.users.find()

{ "_id" : ObjectId("5cff79e8993e70290a081d04"), "name" : "sue", "age" : , "status" : "pending" }

发现原Secondary变成Primary，并且可以进行查询。

开启原Primary服务器上的mongo进程，该服务器变成了Secondary。

七、数据备份和恢复

mongodump从MongoDB中读取数据，保存为BSON文件，mongorestore读取BSON文件恢复到MongoDB中。适用于小型MongoDB的备份和恢复。

mongodump备份的时候只备份MongoDB中的文档，使用mongorestore恢复之后需要重建索引

mongodump --host 10.10.18.11 --port 27017 --username myUserAdmin --password abc123 --gzip --out /data/mongobak/$(date +%F)

注：--oplog  表示备份的时候oplog.bson文件，存放在dump开始 到 dump结束之间所有的oplog。

根据前面的备份恢复到一个新的Replica Set集群中其中一台服务器上。

恢复

恢复的过程中，不要启用认证。否则在将其他机器加入到Replica Set集群中来的时候，会出现无法认证的问题。

1、首先在一台服务器上开启一个干净mongo服务（无任何数据），做为 Primary

mongd.conf配置文件内容

systemLog:

   destination: file

   path: "/data/mongodb/log/mongod.log"

   logAppend: true

storage:

   dbPath: "/data/mongodb/data"

   journal:

      enabled: true

   wiredTiger:

      engineConfig:

        cacheSizeGB:

processManagement:

   fork: true

   pidFilePath: "/data/mongodb/pid/mongod.pid"

net:

   bindIp: 10.10.18.10

   port:

replication:

   replSetName: "rs0"

2、开启mongod服务

/data/mongodb/bin/mongod -f /data/mongodb/mongod.conf

3、创建单个Replica Set

登录mongo，然后创建单个Replica Set

mongo --host 10.10.18.10

> cfg={_id:"rs0",members:[{_id:,host:'10.10.18.10:27017',priority:}]}

> rs.initiate(cfg)

创建结果：

 {

         "ok" : ,

         "operationTime" : Timestamp(, ),

         "$clusterTime" : {

                 "clusterTime" : Timestamp(, ),

                 "signature" : {

                         "hash" : BinData(,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),

                         "keyId" : NumberLong()

                 }

         }

 }

创建好了之后，就可以查看当前的数据库

rs0:SECONDARY> show dbs

admin   .000GB

config  .000GB

local   .000GB

可以发现，目前就三个基本的数据库。

4、恢复数据

mongorestore --host 10.10.18.10 --port  --gzip /data/mongobak/--

结果

 --13T10::33.817+    preparing collections to restore from

 --13T10::33.829+    reading metadata for admin.test from /data/mongobak/--/admin/test.metadata.json.gz

 --13T10::33.832+    reading metadata for test.users from /data/mongobak/--/test/users.metadata.json.gz

 --13T10::33.834+    reading metadata for reporting.reporting from /data/mongobak/--/reporting/reporting.metadata.json.gz

 --13T10::33.841+    reading metadata for admin.reporting from /data/mongobak/--/admin/reporting.metadata.json.gz

 --13T10::33.861+    restoring test.users from /data/mongobak/--/test/users.bson.gz

 --13T10::34.085+    restoring admin.test from /data/mongobak/--/admin/test.bson.gz

 --13T10::34.123+    no indexes to restore

 --13T10::34.123+    finished restoring test.users ( document)

 --13T10::34.123+    restoring admin.reporting from /data/mongobak/--/admin/reporting.bson.gz

 --13T10::34.175+    restoring reporting.reporting from /data/mongobak/--/reporting/reporting.bson.gz

 --13T10::34.230+    no indexes to restore

 --13T10::34.230+    finished restoring admin.test ( documents)

 --13T10::34.233+    no indexes to restore

 --13T10::34.233+    finished restoring reporting.reporting ( document)

 --13T10::34.234+    no indexes to restore

 --13T10::34.234+    finished restoring admin.reporting ( document)

 --13T10::34.234+    restoring users from /data/mongobak/--/admin/system.users.bson.gz

 --13T10::34.312+    done

恢复完成，在登录mongo查看，恢复数据库的情况。

 rs0:PRIMARY> show dbs

 admin      .000GB

 config     .000GB

 local      .000GB

 reporting  .000GB

 test       .000GB

 rs0:PRIMARY> use test

 switched to db test

 rs0:PRIMARY> show collections

 users

 rs0:PRIMARY> db.users.find()

 { "_id" : ObjectId("5cff79e8993e70290a081d04"), "name" : "sue", "age" : , "status" : "pending" }

可以看出之前的记录已经恢复了。

注意：如果备份时，MongoDB是拥有用户名和密码才能进行登录的，在恢复之后，用户名和密码也是可以使用的。如果需要在使用认证登录，需要将下面信息添加的配置文件mongod.conf：

security:

   keyFile: "/data/mongodb/keyfile"

   authorization: "enabled"

然后重启mongo服务。

5、关闭刚恢复的MongoDB，将数据目录同步到另一台服务器上，作为Secondary

通过之前，确认该台服务器上的mongo是无任何数据。将Primary服务上的 /data/mongodb/data 同步到 Secondary服务器上 /data/mongodb/data

6、依次开启Primary、Secondary、Arbiter的mongo服务

7、在Primary服务器上，将Secondary、Arbiter加入到Replica Set集群中来

查看当前Replica Set集群的配置

rs0:PRIMARY> rs.conf()

{

        "_id" : "rs0",

        "version" : ,

        "protocolVersion" : NumberLong(),

        "writeConcernMajorityJournalDefault" : true,

        "members" : [

                {

                        "_id" : ,

                        "host" : "10.10.18.10:27017",

                        "arbiterOnly" : false,

                        "buildIndexes" : true,

                        "hidden" : false,

                        "priority" : ,

                        "tags" : {

                        },

                        "slaveDelay" : NumberLong(),

                        "votes" :

                }

        ],

        "settings" : {

                "chainingAllowed" : true,

                "heartbeatIntervalMillis" : ,

                "heartbeatTimeoutSecs" : ,

                "electionTimeoutMillis" : ,

                "catchUpTimeoutMillis" : -,

                "catchUpTakeoverDelayMillis" : ,

                "getLastErrorModes" : {

                },

                "getLastErrorDefaults" : {

                        "w" : ,

                        "wtimeout" :

                },

                "replicaSetId" : ObjectId("5d01bad15dfd3f294d147b36")

        }

}

可以看到当前Replica Set集群中就一台服务器

将Secondary、Arbiter加入到Replica Set集群中

rs0:PRIMARY> rs.add(

... {

... _id: ,

... host:'10.10.18.11:27017',

... priority:

... }

... )

{

        "ok" : ,

        "operationTime" : Timestamp(, ),

        "$clusterTime" : {

                "clusterTime" : Timestamp(, ),

                "signature" : {

                        "hash" : BinData(,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),

                        "keyId" : NumberLong()

                }

        }

}

rs0:PRIMARY> rs.add(

... {

... _id: ,

... host:'10.10.18.12:27017',

... arbiterOnly:true

... }

... )

{

        "ok" : ,

        "operationTime" : Timestamp(, ),

        "$clusterTime" : {

                "clusterTime" : Timestamp(, ),

                "signature" : {

                        "hash" : BinData(,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),

                        "keyId" : NumberLong()

                }

再次查看状态：

rs0:PRIMARY> rs.conf()

{

        "_id" : "rs0",

        "version" : ,

        "protocolVersion" : NumberLong(),

        "writeConcernMajorityJournalDefault" : true,

        "members" : [

                {

                        "_id" : ,

                        "host" : "10.10.18.10:27017",

                        "arbiterOnly" : false,

                        "buildIndexes" : true,

                        "hidden" : false,

                        "priority" : ,

                        "tags" : {

                        },

                        "slaveDelay" : NumberLong(),

                        "votes" :

                },

                {

                        "_id" : ,

                        "host" : "10.10.18.11:27017",

                        "arbiterOnly" : false,

                        "buildIndexes" : true,

                        "hidden" : false,

                        "priority" : ,

                        "tags" : {

                        },

                        "slaveDelay" : NumberLong(),

                        "votes" :

                },

                {

                        "_id" : ,

                        "host" : "10.10.18.12:27017",

                        "arbiterOnly" : true,

                        "buildIndexes" : true,

                        "hidden" : false,

                        "priority" : ,

                        "tags" : {

                        },

                        "slaveDelay" : NumberLong(),

                        "votes" :

                }

        ],

        "settings" : {

                "chainingAllowed" : true,

                "heartbeatIntervalMillis" : ,

                "heartbeatTimeoutSecs" : ,

                "electionTimeoutMillis" : ,

                "catchUpTimeoutMillis" : -,

                "catchUpTakeoverDelayMillis" : ,

                "getLastErrorModes" : {

                },

                "getLastErrorDefaults" : {

                        "w" : ,

                        "wtimeout" :

                },

                "replicaSetId" : ObjectId("5d01bad15dfd3f294d147b36")

        }

}

加入成功。

开启认证访问

在三台服务器的配置文件中添加：

security:

   keyFile: "/data/mongodb/keyfile"

   authorization: "enabled"

然后依次关闭：Arbiter Secondary Primary

依次开启：Primary Secondary Arbiter

security:

   keyFile: "/data/mongodb/keyfile"

   authorization: "enabled"

MongoDB的集群模式--Replica Set的更多相关文章

mongodb之集群模式
前言数据量大了或者并发量上来了,单机肯定是抗不住的,这个时候要开始考虑使用集群了.mongodb目前为止支持三种集群模式:主从集群,副本集集群,分片集群. 主从集群特性 1. 一主多从2. 主负责 ...
MongoDB的集群模式--Sharding(分片)
分片是数据跨多台机器存储,MongoDB使用分片来支持具有非常大的数据集和高吞吐量操作的部署. 具有大型数据集或高吞吐量应用程序的数据库系统可能会挑战单个服务器的容量.例如,高查询率会耗尽服务器的CP ...
CentOS7+Docker+MangoDB下部署简单的MongoDB分片集群
简单的在Docker上快速部署MongoDB分片集群前言文中使用的环境如下 OS:CentOS Linux release 7.5.1804 (Core) Docker:Docker versio ...
2020重新出发，NOSQL，MongoDB分布式集群架构
MongoDB分布式集群架构看到这里相信你已经掌握了 MongoDB 的大部分基本知识,现在在单机环境下操作 MongoDB 已经不存在问题,但是单机环境只适合学习和开发测试,在实际的生产环境中,M ...
elasticsearch与mongodb分布式集群环境下数据同步
1.ElasticSearch是什么 ElasticSearch 是一个基于Lucene构建的开源.分布式,RESTful搜索引擎.它的服务是为具有数据库和Web前端的应用程序提供附加的组件(即可搜索 ...
zookeeer 集群和伪集群模式
环境变量设置: # .bash_profile # Get the aliases and functions if [ -f ~/.bashrc ]; then . ~/.bashrc fi # U ...
深入剖析Redis系列： Redis集群模式搭建与原理详解
前言在 Redis 3.0 之前,使用哨兵(sentinel)机制来监控各个节点之间的状态.Redis Cluster 是 Redis 的分布式解决方案,在 3.0 版本正式推出,有效地解决了 ...
NoSQL数据库Mongodb副本集架构（Replica Set）高可用部署
NoSQL数据库Mongodb副本集架构(Replica Set)高可用部署作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任. MongoDB 是一个基于分布式文件存储的数据库.由 C ...
Redis集群模式部署
以下以Linux(CentOS)系统为例 1.1 下载和编译 $ wget http://download.redis.io/releases/redis-4.0.7.tar.gz $ tar xzf ...

随机推荐

Pandas | 11 字符串函数
在本章中,我们将使用基本系列/索引来讨论字符串操作.在随后的章节中,将学习如何将这些字符串函数应用于数据帧(DataFrame). Pandas提供了一组字符串函数,可以方便地对字符串数据进行操作. ...
图的遍历 | 1034 map处理输入数据，连通块判断
这题写得比较痛苦.首先有点不在状态,其次题目比较难读懂. “Gang”成立的两个条件:①成员数大于两个 ②边权总和大于阈值K 首先,在录数据的时候通过map或者字符串哈希建立string到int的映 ...
洛谷 p1516 青蛙的约会题解
dalao们真是太强了,吊打我无名蒟蒻我连题解都看不懂,在此篇题解中,我尽量用语言描述,不用公式推导(dalao喜欢看公式的话绕道,这篇题解留给像我一样弱的) 进入正题如果不会扩展欧里几德的话请先 ...
IIS启动后不在桌面显示
1.问题周末一过,准备投入到紧张激烈的工作之中.不曾想IIS打开后不在桌面显示了,任务栏有打开的图标,配置的网站可以正常打开.尝试重装无果. 2.解决 Win+R,在运行中输入inetmgr.exe ...
shell 一些例子
#!/bin/bash #Filename: password.sh by:-V love cmx stty -echo #这里表示开启隐藏在终端的输出 read -p "Enter y ...
Python【每日一问】20
问: [基础题]: 企业发放的奖金根据利润提成.利润(I): 低于或等于10万元时,奖金可提10%: 高于10万元,低于20万元时,低于10万元的部分按10%提成,高于10万元的部分,可提成7.5%: ...
volatile 和内存屏障
接下来看看volatile是如何解决上面两个问题的: 被volatile修饰的变量在编译成字节码文件时会多个lock指令,该指令在执行过程中会生成相应的内存屏障,以此来解决可见性跟重排序的问题. 内存 ...
Java还是编程语言中的老大？凭什么长期霸占第一宝座？
首先,Java语言之所以能够迅速在科技行业内普及,一个重要的原因是Java语言的出现恰好契合了Web时代对于编程语言的要求,可以说Java语言的大流行是互联网时代发展的必然结果,虽然Java自身有诸多 ...
11. Scala数据结构(下)-集合操作
11.1 集合元素的映射-map映射操作 11.1.1 看一个实际需求要求:请将List(3,5,8)中所有的元素都*2,将其结果放到一个新的集合中返回,即返回一个新的List(6,10,16),请 ...
封装：WPF绘制曲线视图
原文:封装:WPF绘制曲线视图一.目的:绘制简单轻量级的曲线视图二.实现: 1.动画加载曲线 2.点击图例显示隐藏对应曲线 3.绘制标准基准线 4.绘制蒙板显示标准区域曲线图示例: 心电图示例: ...

MongoDB的集群模式--Replica Set

MongoDB的集群模式--Replica Set的更多相关文章

随机推荐

热门专题