机器:10.165.38.68    10.165.38.72

部署包:mongodb-linux-x86_64-rhel55-3.0.2.tgz(百度云盘下载地址:http://pan.baidu.com/s/1jIQAGlw 密码:l7pf)

部署结构:

10.165.38.68上部署配置服务、路由服务、和分片服务

10.165.38.72上部署分片服务

下面开始分服务器讲解部署的过程:

第一台服务器:10.165.38.68

第一步:上传上面的部署包到linux服务器上

第二步:解压缩该文件 命令为tar zxvf mongodb-linux-x86_64-rhel55-3.0.2.tgz

第三步:将解压得到的文件夹mongodb-linux-x86_64-rhel55-3.0.2,改名为mongodb_3.0.2

第四步:进入mongodb_3.0.2目录下,内容如下:

第五步:创建文件夹config、shard、route

a:创建配置服务文件夹 mkdir config

b:创建分片服务文件夹 mkdir shard

c:创建路由服务文件夹 mkdir route

第六步:分别在config、shard、route文件夹目录下,创建db(数据存储目录)和log(日志存储目录)文件夹,并在log文件夹中创建mongodb.log文件

a:在config文件夹中创建db文件夹  mkdir config/db

b:在config文件夹中创建log文件夹 mkdir config/log

c:在config/log文件夹中创建mongodb.log文件  touch config/log/mongodb.log

【在shard文件夹中也需要执行上面3个操作:a:mkdir shard/db   b:mkdir config/log   c:touch shard/log/mongodb.log】

【在route文件夹中也需要执行上面2个操作:a:mkdir route/log   b:touch route/log/mongodb.log】

注意到route路由服务没有创建db文件夹,因为路由服务器不需要存储数据,所以不用执行mkdir route/db命令

第七步:在mongodb-3.0.2目录下创建conf文件夹,即与shard、config、route文件夹属同级目录

conf文件夹用来存放启动的配置文件。

第八步:在conf文件夹下创建启动配置文件,有3个文件,route、shard、config(名称自己取,和后面第九步启动命令中文件名对应上即可)

a:创建配置服务器启动文件 vi config,添加如下语句:

configsvr=true
port=10252
dbpath=../config/db
logpath=../config/log/mongodb.log
logappend=true
fork=true

解释:

configsvr规定这是配置服务

port为配置服务器端口号

dbpath为配置服务器的数据存储路径即为第六步中config文件夹中db文件夹的路径,../为上一层的意思

logpath为配置服务器的日志存储路径即为第六步中config文件夹中log文件夹下mongodb.log文件的路径

logappend为错误日志采用追加模式(默认会使用覆盖模式)

fork为以守护进程的方式运行mongodb

添加完成后,保存文件。

b:创建分片服务器启动文件 vi shard,添加如下语句:

shardsvr=true
port=10251
dbpath=../shard/db
logpath=../shard/log/mongodb.log
storageEngine=wiredTiger
wiredTigerCacheSizeGB=1
wiredTigerJournalCompressor=zlib
logappend=true
fork=true

解释:

shardsvr规定这是分片服务

port为分片服务器端口号

dbpath为分片服务器的数据存储路径即为第六步中shard文件夹中db文件夹的路径,../为上一层的意思

logpath为分片服务器的日志存储路径即为第六步中shard文件夹中log文件夹下mongodb.log文件的路径

storageEngine为mongodb存储引擎,在3.0之后的版本新增的功能,可以通过该引擎插件实现启动内存设置等

wiredTigerCacheSizeGB为mongodb内存设置,此处我设置的为1G,可以用来限定mongodb占用内存大小

wiredTigerJournalCompressor为mongodb引擎压缩数据,这样可以对存储的数据进行压缩存储,比如我在服务器上看mongodb的数据只有40MB,但是我导出来会发现这个数据大得多,我本地测试导出来的数据有250M之多。

logappend为错误日志采用追加模式(默认会使用覆盖模式)

fork为以守护进程的方式运行mongodb

添加完成后,保存文件。

c:创建路由服务器启动文件 vi route,添加如下语句:

configdb=10.165.38.68:10252
port=10253
logpath=../route/log/mongodb.log
logappend=true
fork=true

解释:

configdb为配置服务器ip和地址即第八步a中配置的config服务器的端口号,ip为该config所在服务器的ip地址

port为路由服务器的端口

logpath为路由服务器的日志存储路径即为第六步中route文件夹中log文件夹下mongodb.log文件的路径

logappend为错误日志采用追加模式(默认会使用覆盖模式)

fork为以守护进程的方式运行mongodb

添加完成后,保存文件。

至此,分片服务器、配置服务器、路由服务器的启动配置文件就全部配置好了,可以在conf下看到3个文件:

第九步:进入bin目录下,启动mongodb,分3步,需要启动配置服务器、分片服务器、路由服务器

a:启动配置服务器  ./mongod -f /home/自己的路径/mongodb-3.0.2/conf/config

b:启动分片服务器 ./mongod -f /home/自己的路径/mongodb-3.0/conf/shard

c:启动路由服务器 ./mongos -f /home/自己的路径/mongodb-3.0/conf/route (注意这里的命令是 mongos,上面是 mongod)

至此第一台服务器就部署完成了,不要走开,下面部署第二台服务器,实现集群分片策略

第二台服务器:10.165.38.72

该台服务器部署比较简单,只需要部署一个分片服务即可

第一步:上传部署包至linux服务器,解压部署包,并将解压得到的文件夹改名为mongodb_3.0.2,进入该目录

    这四步我就不在赘述了,与上面10.165.38.68服务器的前四步完全相同。

第二步:进入mongodb_3.0.2目录,创建shard文件夹

创建分片服务文件夹 mkdir shard

第三步:在shard文件夹目录下,创建db(数据存储目录)和log(日志存储目录)文件夹,并在log文件夹中创建mongodb.log文件

a:在shard文件夹中创建db文件夹  mkdir shard/db

b:在shard文件夹中创建log文件夹 mkdir shard/log

c:在shard/log文件夹中创建mongodb.log文件  touch shard/log/mongodb.log

第四步:在mongodb-3.0.2目录下创建conf文件夹,即与shard文件夹属同级目录

conf文件夹用来存放启动的配置文件。

第五步:在conf文件夹下创建启动配置文件shard(名称自己取,和后面启动命令中文件名对应上即可)

创建分片服务器启动文件 vi shard,添加如下语句:

解释:

shardsvr规定这是分片服务

port为分片服务器端口号

dbpath为分片服务器的数据存储路径即为第三步中shard文件夹中db文件夹的路径,../为上一层的意思

logpath为分片服务器的日志存储路径即为第三步中shard文件夹中log文件夹下mongodb.log文件的路径

storageEngine为mongodb存储引擎,在3.0之后的版本新增的功能,可以通过该引擎插件实现启动内存设置等

wiredTigerCacheSizeGB为mongodb内存设置,此处我设置的为1G,可以用来限定mongodb占用内存大小

wiredTigerJournalCompressor为mongodb引擎压缩数据,这样可以对存储的数据进行压缩存储,比如我在服务器上看mongodb的数据只有40MB,但是我导出来会发现这个数据大得多,我本地测试导出来的数据有250M之多。

logappend为错误日志采用追加模式(默认会使用覆盖模式)

fork为以守护进程的方式运行mongodb

添加完成后,保存文件。

至此,分片服务器的启动配置文件就全部配置好了,可以在conf下看到1个文件:

第六步:进入bin目录下,启动分片服务器

./mongod -f /home/自己的路径/mongodb-3.0/conf/shard

出现started successfully字样,表示启动成功

至此mongodb的集群加分片就部署完成了。下面我们需要登录mongodb服务器,添加分片与路由服务器的关联

第七步:在路由服务器上,进入mongodb-3.0.2/bin的目录下,我这里就是第一台服务器10.165.38.68

执行./mongo localhost:10253 这里的10253是在上面的第八步c中配置的端口号

这样就进入了mongodb的路由服务器。在执行如下命令

a:进入admin数据库  use admin

b:添加分片

db.runCommand({addShard:"10.165.38.68:10251"})  这里的10251是上面第八步中b的端口

db.runCommand({addShard:"10.165.38.72:10251"})  这里的10252是第二台服务器中第五步的端口

c:指定需要分片的数据库

db.runCommand({enableSharding:"logtest"})  该数据库名称为logtest,可自由取名

d:指定需要分片的集合以及片键

db.runCommand({shardCollection:"logtest.logInstance",key:{_id:1}}) 这里的logtest为上面c的数据库取名,logInstance为该数据库中集合的名字类似于mysql数据库中表名含义,指定片键为mongodb的id作为片键。

执行命令后效果如下:

至此所有的部署与配置工作就全部完成了。有心跟随我走到这一步的人相信都是有耐心的人,对于mongodb的部署应该也了解了。

mongodb集群+分片部署(二)的更多相关文章

  1. MongoDB集群分片部署

    MongoDB中使用分片集群结构分布: 三个主要组件: Shard: 用于存储实际的数据块,实际生产环境中一个shard server角色可由几台机器组个一个replica set承担,防止主机单点故 ...

  2. 搭建高可用mongodb集群—— 分片

    从节点每个上面的数据都是对数据库全量拷贝,从节点压力会不会过大? 数据压力大到机器支撑不了的时候能否做到自动扩展? 在系统早期,数据量还小的时候不会引起太大的问题,但是随着数据量持续增多,后续迟早会出 ...

  3. MongoDB集群——分片

    1. 分片的结构及原理分片集群结构分布: 分片集群主要由三种组件组成:mongos,config server,shard1) MONGOS数据库集群请求的入口,所有的请求都通过mongos进行协调, ...

  4. mongodb 集群分片

    分片 在Mongodb里面存在另一种集群,就是分片技术,可以满足MongoDB数据量大量增长的需求 当MongoDB存储海量的数据时,一台机器可能不足以存储数据,也可能不足以提供可接受的读写吞吐量,这 ...

  5. MongoDB集群配置笔记二(实战)

    单台mongodb配置文件: dbpath=/opt/mongodb/data logpath=/opt/mongodb/logs/mongodb.log logappend=true fork=tr ...

  6. MongoDB集群部署 - 带访问控制的分片副本集

    1. 前言 Ceilometer将meter.event等数据保存在MongoDB中,之前将MongoDB部署在控制节点上,使用三副本模式,时间长了发现meter数据爆炸式增长,区区2T的磁盘捉襟见肘 ...

  7. Mongodb副本集+分片集群环境部署记录

    前面详细介绍了mongodb的副本集和分片的原理,这里就不赘述了.下面记录Mongodb副本集+分片集群环境部署过程: MongoDB Sharding Cluster,需要三种角色: Shard S ...

  8. Mongodb副本集+分片集群环境部署

    前面详细介绍了mongodb的副本集和分片的原理,这里就不赘述了.下面记录Mongodb副本集+分片集群环境部署过程: MongoDB Sharding Cluster,需要三种角色: Shard S ...

  9. [转]搭建高可用mongodb集群(二)—— 副本集

    在上一篇文章<搭建高可用MongoDB集群(一)——配置MongoDB> 提到了几个问题还没有解决. 主节点挂了能否自动切换连接?目前需要手工切换. 主节点的读写压力过大如何解决? 从节点 ...

随机推荐

  1. Microsoft Edge与Google Chrome那些不同的举止

    以下针对14393版本Edge与Chrome 54 html dom/select的如果options里没有符合的值时edge会选择第一个,chrome(54)会置空选项 html dom/input ...

  2. python json数组对象排序

    arr = [{"name": "name_1", "level": 1}, {"name": "name_2 ...

  3. W: http://archive.ubuntukylin.com:10006/ubuntukylin/dists/xenial/InRelease: Signature by key 6CE35A4EBAB676094476BE7CD259B7555E1D3C58 uses weak digest algorithm (SHA1)

    新装ubuntukylin 16.04,sudo apt-get update 时遇到如下问题:   Hit:1 http://archive.ubuntukylin.com:10006/ubuntu ...

  4. android 界面布局

    一.LinearLayout LinearLayout 又称作线性布局,是一种非常常用的布局,它所包含的控件在线性方向上依次排列. android:orientation="horizont ...

  5. shrio登录验证

    shiro的认证过程也就是判断用户名和密码的过程,在认证过程中,用户需要提交实体信息(用户名)(Principals)和凭据信息(密码)(Credentials)来判断用户是否合法,最常见的" ...

  6. 百度移动搜索自动转码太坑爹,JS跳转地址会被抓取

    这段时间碰到个很崩溃的问题,一个页面通过 script 加载请求服务端进行统计再输出js进行跳转,分为两个步骤分别统计, 打开页面通过script 请求远程服务器进行统计并输出要通过js使页面跳转的最 ...

  7. 深入了解css3新特性

    深入了解css3新特性:http://www.ibm.com/developerworks/cn/web/1202_zhouxiang_css3/

  8. C# ExcelHelper

    using System; using System.IO; using System.Data; using System.Collections; using System.Data.OleDb; ...

  9. 每天学习一点点...css...

    <!DOCTYPE html> <html> <head> <meta charset="UTF-8"> <title> ...

  10. C# 中获取时区列表

    c#中获取时区列表 下面方法获得的仅仅用来显示和使用,无法用来进行时间转换. public static List<DisplayTimeZone> GetSystemTimeZones( ...