Linux中mongodb定时远程备份
下载mongodb
https://www.cnblogs.com/tartis/p/5291580.html
mongodb定时备份文档
虚拟机报错要改BIOS 虚拟技术开启
进入root账户 su root 回车输入密码
一、创建MongoDB备份目录
mkdir -p /data1/mongodb_bak/mongodb_bak_now
mkdir -p /data1/mongodb_bak/mongodb_bak_list
二、新建MongoDB数据库备份脚本(/data1/mongodb_bak)
创建:touch 文件名。
如:touch mongodtask.sh
编辑:sudo gedit mongodtask.sh 复制一下脚本代码按需要修改
脚本:
#!/bin/bash
#backup MongoDB
#mongodump命令路径
DUMP=/home/test/Downloads/mongodb/bin/mongodump
#临时备份目录
OUT_DIR=/data1/mongodb_bak/mongodb_bak_now
#备份存放路径
TAR_DIR=/data1/mongodb_bak/mongodb_bak_list
#获取当前系统时间
DATE=`date +%Y_%m_%d`
#数据库账号
DB_USER=root
#数据库密码
DB_PASS=p2005
#DAYS=15代表删除15天前的备份,即只保留近15天的备份
DAYS=15
#最终保存的数据库备份文件
TAR_BAK="mongodb_bak_$DATE.tar.gz"
cd $OUT_DIR
rm -rf $OUT_DIR/*
mkdir -p $OUT_DIR/$DATE
#备份全部数据库
$DUMP -h 127.0.0.1:27017 -d test -o $OUT_DIR/$DATE
#压缩为.tar.gz格式
tar -zcvf $TAR_DIR/$TAR_BAK $OUT_DIR/$DATE
#copy to 192.168.33.129
scp $TAR_DIR/$TAR_BAK root@192.168.33.129:/data/mongodb_bak
#删除15天前的备份文件
find $TAR_DIR/ -mtime +$DAYS -delete
exit
省略了连接文件存储系统的账号和密码因为没设若需要按照下面格式:
1. $DUMP -h 127.0.0.1:27017 -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" -o $OUT_DIR/$DATE
三、修改文件属性,使其可执行(目录下执行)
给该脚本赋权限:chmod +755 mongodtask.sh
四、修改/etc/crontab,添加计划任务
1 进入编辑界面 记得要用root用户登录操作不然没有权限
1 |
crontab -e |
2 添加任务 每分钟开始执行MongoDB数据库备份脚本
1 |
* * * * * /data1/mongodb_bak/mongodtask.sh |
注意点:linux 下按A为编辑模式ctrl+z中断操作
Ctrl+c 退出编辑模式
SHIFT+Z 两次保存文件
或输入冒号然后输入wq
保存后退出,启动
1 |
service crond start |
设置开机自启动
要把cron设为在开机的时候自动启动,在 /etc/rc.d/rc.local 脚本中加入 /sbin/service crond start 即可
注意此脚本在mongodb开启时有效,否则会出错。
是否成功只需要看是否定时能在/data1/mongodb_bak 有文件生成
查看当前用户的crontab,输入 crontab -l;
编辑crontab,输入 crontab -e;
删除crontab,输入 crontab -r 慎用
五、A、B端免密登录(为了进行copy不用输入密码和安全性)
一、证书登录的过程:(了解性资料)
1.客户端生成证书的私钥和公钥。
私钥放在客户端,公钥上传到服务端(远程登陆端)。
一般为了安全,访问有黑客拷贝客户端的私钥,客户端在生成私钥时,会设置一个密码,以后每次登录ssh服务器时,客户端都要输入密码解开私钥(如果工作中,你使用了一个没有密码的私钥,有一天服务器被黑了,你是跳到黄河都洗不清)。
2.服务器添加信用公钥。
把客户端生成的公钥,上传到ssh服务器,添加到指定的文件中,这样,就完成ssh证书登录的配置了。
假设客户端想通过私钥要登录其他ssh服务器,同理,可以把公钥上传到其他ssh服务器。
二、具体操作:(生成的证书在/root/.ssh/ 目录下)
环境:A通过ssh方式登陆B,即:A为本地机,B为远程登陆server
1.A机配置
①生成公钥和私钥
ssh-keygen -t rsa (连续三次回车,即在本地生成了公钥和私钥,不设置密码)
②将公钥拷到B端
先在B端/root/目录下输入:mkdir .ssh
scp /root/.ssh/id_rsa.pub 192.168.33.129:./.ssh/id_rsa.pub
2. B机配置
输入:vi /etc/ssh/sshd_config
找到
RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeysFile .ssh/authorized_keys
修改AuthorizedKeysFile .ssh/authorized_keys2
去掉#号使其生效 需要输入下面命令重启下sshd
输入:service sshd stop
输入:service sshd start
①创建authorized_keys2文件命令如下:
touch /root/.ssh/authorized_keys2
(如果已经存在这个文件, 跳过这条)
②追加公钥到authorized_keys2中命令如下:
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys2
(将id_rsa.pub的内容追加到 authorized_keys2 中)
chmod 600 ~/.ssh/authorized_keys2 赋权
A端执行shell脚本看看是否能直接备份~如果不行百度
成功后rm -f /root/.ssh/id_rsa.pub 删除 安全起见
附录:MongoDB数据库恢复
#恢复全部数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/
#恢复单个数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore -d dbname --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/dbname
部分参数说明
--drop参数:恢复数据之前删除原来的数据,避免数据重复
--noIndexRestore参数:恢复数据时不创建索引
--dir参数:数据库备份目录
-d参数:后面跟要恢复的数据库名称
或下面方法
mongodb 使用 mongorestore 命令来恢复备份的数据
1 |
>mongorestore -h <hostname><:port> -d dbname <path> |
1、--host <:port>, -h <:port>:MongoDB所在服务器地址,默认为: localhost:27017
2、--db , -d :需要恢复的数据库实例,例如:test,当然这个名称也可以和备份时候的不一样,比如test2
3、--drop:恢复的时候,先删除当前数据,然后恢复备份的数据。就是说,恢复后,备份后添加修改的数据都会被删除,慎用哦!
4、<path>:
最后的一个参数,设置备份数据所在位置,例如:c:datadumptest。
你不能同时指定 <path> 和 --dir 选项,--dir也可以设置备份目录。
5、--dir:指定备份的目录
你不能同时指定 <path> 和 --dir 选项。
mongodb定时备份文档
虚拟机报错要改BIOS 虚拟技术开启
进入root账户 su root 回车输入密码
一、创建MongoDB备份目录
mkdir -p /data1/mongodb_bak/mongodb_bak_now
mkdir -p /data1/mongodb_bak/mongodb_bak_list
二、新建MongoDB数据库备份脚本(/data1/mongodb_bak)
创建:touch 文件名。
如:touch mongodtask.sh
编辑:sudo gedit mongodtask.sh 复制一下脚本代码按需要修改
脚本:
#!/bin/bash
#backup MongoDB
#mongodump命令路径
DUMP=/home/test/Downloads/mongodb/bin/mongodump
#临时备份目录
OUT_DIR=/data1/mongodb_bak/mongodb_bak_now
#备份存放路径
TAR_DIR=/data1/mongodb_bak/mongodb_bak_list
#获取当前系统时间
DATE=`date +%Y_%m_%d`
#数据库账号
DB_USER=root
#数据库密码
DB_PASS=p2005
#DAYS=15代表删除15天前的备份,即只保留近15天的备份
DAYS=15
#最终保存的数据库备份文件
TAR_BAK="mongodb_bak_$DATE.tar.gz"
cd $OUT_DIR
rm -rf $OUT_DIR/*
mkdir -p $OUT_DIR/$DATE
#备份全部数据库
$DUMP -h 127.0.0.1:27017 -d test -o $OUT_DIR/$DATE
#压缩为.tar.gz格式
tar -zcvf $TAR_DIR/$TAR_BAK $OUT_DIR/$DATE
#copy to 192.168.33.129
scp $TAR_DIR/$TAR_BAK root@192.168.33.129:/data/mongodb_bak
#删除15天前的备份文件
find $TAR_DIR/ -mtime +$DAYS -delete
exit
省略了连接文件存储系统的账号和密码因为没设若需要按照下面格式:
1 $DUMP -h 127.0.0.1:27017 -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" -o $OUT_DIR/$DATE
三、修改文件属性,使其可执行(目录下执行)
给该脚本赋权限:chmod +755 mongodtask.sh
四、修改/etc/crontab,添加计划任务
1 进入编辑界面 记得要用root用户登录操作不然没有权限
1 |
crontab -e |
2 添加任务 每分钟开始执行MongoDB数据库备份脚本
1 |
* * * * * /data1/mongodb_bak/mongodtask.sh |
注意点:linux 下按A为编辑模式ctrl+z中断操作
Ctrl+c 退出编辑模式
SHIFT+Z 两次保存文件
或输入冒号然后输入wq
保存后退出,启动
1 |
service crond start |
设置开机自启动
要把cron设为在开机的时候自动启动,在 /etc/rc.d/rc.local 脚本中加入 /sbin/service crond start 即可
注意此脚本在mongodb开启时有效,否则会出错。
是否成功只需要看是否定时能在/data1/mongodb_bak 有文件生成
查看当前用户的crontab,输入 crontab -l;
编辑crontab,输入 crontab -e;
删除crontab,输入 crontab -r 慎用
五、A、B端免密登录(为了进行copy不用输入密码和安全性)
一、证书登录的过程:(了解性资料)
1.客户端生成证书的私钥和公钥。
私钥放在客户端,公钥上传到服务端(远程登陆端)。
一般为了安全,访问有黑客拷贝客户端的私钥,客户端在生成私钥时,会设置一个密码,以后每次登录ssh服务器时,客户端都要输入密码解开私钥(如果工作中,你使用了一个没有密码的私钥,有一天服务器被黑了,你是跳到黄河都洗不清)。
2.服务器添加信用公钥。
把客户端生成的公钥,上传到ssh服务器,添加到指定的文件中,这样,就完成ssh证书登录的配置了。
假设客户端想通过私钥要登录其他ssh服务器,同理,可以把公钥上传到其他ssh服务器。
二、具体操作:(生成的证书在/root/.ssh/ 目录下)
环境:A通过ssh方式登陆B,即:A为本地机,B为远程登陆server
1.A机配置
①生成公钥和私钥
ssh-keygen -t rsa (连续三次回车,即在本地生成了公钥和私钥,不设置密码)
②将公钥拷到B端
先在B端/root/目录下输入:mkdir .ssh
scp /root/.ssh/id_rsa.pub 192.168.33.129:./.ssh/id_rsa.pub
2. B机配置
输入:vi /etc/ssh/sshd_config
找到
RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeysFile .ssh/authorized_keys
修改AuthorizedKeysFile .ssh/authorized_keys2
去掉#号使其生效 需要输入下面命令重启下sshd
输入:service sshd stop
输入:service sshd start
①创建authorized_keys2文件命令如下:
touch /root/.ssh/authorized_keys2
(如果已经存在这个文件, 跳过这条)
②追加公钥到authorized_keys2中命令如下:
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys2
(将id_rsa.pub的内容追加到 authorized_keys2 中)
chmod 600 ~/.ssh/authorized_keys2 赋权
A端执行shell脚本看看是否能直接备份~如果不行百度
成功后rm -f /root/.ssh/id_rsa.pub 删除 安全起见
附录:MongoDB数据库恢复
#恢复全部数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/
#恢复单个数据库
mongorestore -u $DB_USER -p $DB_PASS --authenticationDatabase "admin" --noIndexRestore -d dbname --dir /data/mongodb_bak/mongodb_bak_now/2016_12_17/dbname
部分参数说明
--drop参数:恢复数据之前删除原来的数据,避免数据重复
--noIndexRestore参数:恢复数据时不创建索引
--dir参数:数据库备份目录
-d参数:后面跟要恢复的数据库名称
或下面方法
mongodb 使用 mongorestore 命令来恢复备份的数据
1 |
>mongorestore -h <hostname><:port> -d dbname <path> |
如果失败:可以在目录下./mongorestore -h <hostname><:port> -d dbname <path>
1、--host <:port>, -h <:port>:MongoDB所在服务器地址,默认为: localhost:27017
2、--db , -d :需要恢复的数据库实例,例如:test,当然这个名称也可以和备份时候的不一样,比如test2
3、--drop:恢复的时候,先删除当前数据,然后恢复备份的数据。就是说,恢复后,备份后添加修改的数据都会被删除,慎用哦!
4、<path>:
最后的一个参数,设置备份数据所在位置,例如:c:datadumptest。
你不能同时指定 <path> 和 --dir 选项,--dir也可以设置备份目录。
5、--dir:指定备份的目录
你不能同时指定 <path> 和 --dir 选项。
Linux中mongodb定时远程备份的更多相关文章
- Linux中的定时自动执行功能(at,crontab)
Linux中的定时自动执行功能(at,crontab) 概念 在Linux系统中,提供了两种提前对工作进行安排的方式 at 只执行一次 crontab 周期性重复执行 通过对这两个工具的应用可以让我们 ...
- linux下mongodb定时备份指定的集合
目标:把一台linux机上mongodb的数据定时备份到另一台机上: 过程: 一开始打算使用mongoexport和mongoimport,但是总是会报“\x00”字符串不能识别的问题,后来就改成了m ...
- Linux下shell脚本实现mongodb定时自动备份
MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案. MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功 ...
- 利用腾讯云COS云对象存储定时远程备份网站
版权声明:本文由张戈 原创文章,转载请注明出处: 文章原文链接:https://www.qcloud.com/community/article/942851001487125915 来源:腾云阁 h ...
- linux中服务器定时程序设定
服务器不重启的情况下定时自动重启apache及mysql服务,其实也大同小异.具体步骤如下: 一.每天的12点及16点重启apache及mysql服务 [root@www bin]# cd /opt ...
- Linux rsync数据定时增量备份
一.安装rsync服务端 1.查看是否安装rsync ps -ef | grep rsync 系统一般默认已安装,安装方法: yum -y install rsync 2.添加配置文件 rsync没有 ...
- Linux 中的定时处理 cron服务
cron服务 在LINUX中,周期执行的任务一般由cron这个守护进程来处理 当安装完操作系统后默认会安装此服务工具并且会自动启动crond,该进程会每分钟定期检查是否有要执行的任务,若有则执行. c ...
- Linux下mysql定时自动备份并FTP到远程脚本
1.添加backupmysqleveryday.sh(vi /data/shell/backupmysqleveryday.sh) #!/bin/sh #this shell is user for ...
- Linux 中我该如何备份系统
系统备份概述 在前面的一些文章中,我反复提到经常会把系统搞崩溃,所以备份系统就是一件不容忽视的事情.由于 Linux 系统本身的优越性,系统的备份和还原还是比较容易的.主要表现在以下方面: Linux ...
随机推荐
- int(*p)[]和int(**p)[]
1. int(*p)[10]: 根据运算符的结合律,()的优先级最高,所以p是一个指针,指向的一个维度为10的一维数组. p一个指向数组的某一行 int a[1][4]={1,2,3,4}; int ...
- React Native之AppRegistry模块
我们在写react native的js的时候,在最后总会加上一段代码: AppRegistry.registerComponent('ReactDemo', () => ReactDemo); ...
- 文件I/O实践(1) --基础API
什么是I/O 输入/输出是内存和外设之间拷贝数据的过程: 设备->内存: 输入操作 内存->设备: 输出操作 高级I/O: ANSI C提供的标准I/O库函数成为高级I/O, 也称为带缓冲 ...
- Linux0.11启动过程
从开机加电,到执行main函数之前的过程 好吧,这里应该是有执行3个汇编的文件,但是我不太了解.囧 从main函数,到启动OK(即可以响应用户操作了) 这个步骤做了3件事情: 创建进程0,使之具备在主 ...
- 【linux】mkfifo 命令创建命名管道实现进程之间通信
mkfifo 命令 mkfifo命令创建一个FIFO特殊文件,是一个命名管道(可以用来做进程之间通信的桥梁) 管道也是一种文件,一般是linux中的一个页大小,4k,管道数据一旦被读取就没了.(管道大 ...
- linux进程管理之进程创建
所谓进程就是程序执行时的一个实例. 它是现代操作系统中一个很重要的抽象,我们从进程的生命周期:创建,执行,消亡来分析一下Linux上的进程管理实现. 一:前言 进程管理结构; 在内核中,每一个进程对应 ...
- WebService开发指南
WebServiceInAurora Web Service Web Service是一种面向服务的架构的技术,通过标准的Web协议提供服务,目的是保证不同平台的应用服务可以互操作.在Aurora框架 ...
- Java-Filter-FilterChain-FilterConfig源码
public interface Filter { /** * Called by the web container to indicate to a filter that it is being ...
- Learning ROS for Robotics Programming Second Edition学习笔记(六) indigo xtion pro live
中文译著已经出版,详情请参考:http://blog.csdn.net/ZhangRelay/article/category/6506865 Learning ROS for Robotics Pr ...
- SpriteBuilder物理对象的父子关系
注意:打开物理使能(Physics-enabled)的节点忽略他们的父节点关系. 这意味着,一个物理使能的子节点不会随着其父节点移动. 物理引擎对于节点父子关系这个概念毫不知情,因此单独的对待所有物理 ...