1. 前言 由于线上的mongodb 数据体量越来越大,如果没有完善的备份方案,发生故障势必造成业务很长时间的暂停.参考了网上方案,写出以下总结和备份方案: 备份方案分为两种:全备和增量备份,二者结合起来使用. 参考链接:https://www.cnblogs.com/xuliuzai/p/9917137.html  感谢作者的分享. 2. 构建mongodb 副本集测试环境 首先在测试环境进行测试,过程如下: 测试机:192.168.118.16  系统:CentOS 7 首先搭建mongod

Xtrabackup每周增量备份脚本程序(含附件)   程序描述 本程序是一个对percona xtrabackup使用的脚本,它完成了MySQL每周的备份. 程序结构 此程序包含了4个目录(bin.conf.log.var): bin:存放运行备份的主脚本程序(*.sh). conf:存放着程序运行的配置文件变量(*.conf). log:存放的是备份时xtrabackup的输出内容(*.log). var:存放了索引文件(*.index)和错误记录文件(*.err). *.index:每当备

企业完全备份脚本 [root@client ~]# vim /opt/mysql_bak_wanbei.sh #!/bin/bash #MySQL数据库完全备份脚本 #设置登录变量 MY_USER="root" MY_PASS="123456" MY_HOST="localhost" MY_CONN="-u$MY_USER -p$MY_PASS -h$MY_HOST" #设置备份的数据库(或表) MY_DB="cli

是否因为mysql太大,来回备份浪费资源带宽而发愁,如果想解决这个麻烦就需要增量备份. vi /etc/my.cnf开启日志及定期清理日志log-bin=mysql-binbinlog_format=mixed//二进制日志自动删除的天数.默认值为0,表示“没有自动删除”expire_logs_days = 5 全备份脚本: #!/bin/bash # Name:qbk全备份脚本 # mysql qbk scripts # By zxsdw.com # Last Modify:-- #定义脚本存

MySQL数据库常用的办法是通过MySQLdump导出sql进行备份,但是不适合数据量很大的数据库,速度,锁表是两个严重的问题.前面写了一遍文章介绍xtrabackup的热备工具,见 http://www.linuxidc.com/Linux/2015-02/113058.htm.下面的脚本是基于xtrabackup实现自动备份数据库的功能. 需求描述: 每天晚上23点,对数据库进行一次完整备份.第二天0-22点,每小时进行一次增量备份.每次备份前把上次的完整备份和23次增量备份移动到指定目录里

一.全量备份 环境:一台主SVN,一台备SVN(主要提供备份功能),后续可通过钩子脚本进行实时备份,后续发给大家. 工作原理:通过svn的hotcopy命令过行热备份,并进行一系列的检查,备份后通过rsync推送到备份机上. 脚本如下: ======= #!/bin/bash#Version: V2 #Date: 2015-02-03 #Author: wang CONFDIR=/usr/local/httpdBASEDIR=/home/xxx/scripts/svn_full_bakSVNCM

#!/bin/sh ############################### # 此脚本用来增量备份 # 此文件名:mysqldailybackup.sh # # Author: zhangrox # mail: hienha@163.com # create: 2013/06/29 # # 每个星期一到六早上3点做一次增量备份(加 & 为后台执行) # 0 3 * * 1-6 root /backup/mysql/daily_backup/mysqldailybackup.sh &

 1.mysql全量备份及定时删除备份文件脚本 #!/bin/bash v_user="root" v_password="mysql" backup_date=`date +%Y%m%d%H%M` mysqldir=/usr/local/mysql full_backup=/mysql/data/full_backup mkdir -p $full_backup/$backup_date $mysqldir/bin/mysqldump -u$v_user -p$v

目录 一.备份原理 innobackupex原理 binlog原理 特点 备份策略 二.环境准备 开启binlog 创建授权用户 安装innobackupex 三.添加脚本 全量备份 增量备份 binlog 重写备份 备份周期 四.容灾测试 模拟备份 错误恢复 五.重写测试 一.备份原理 innobackupex原理 首先会启动一个xtrabackup_log后台检测的进程,实时检测mysql redo的变化,一旦发现redo有新的日志写入,立刻将日志写入到日志文件xtrabackup_log中

shell脚本: #!/bin/bash export PATH=/usr/local/bin:/usr/bin:/bin dir=/mnt/ DAY=`date "+%Y-%m-%d" ` DAY2=`date --date='7 days ago' +%Y-%m-%d` if [ -d $dir$DAY2 ];then rm -rf $dir$DAY2 fi rsync -az --delete /opt/nginx /mnt/$DAY 加入到crontab,每2小时执行一次 0

################################################################## ##    rman_backup.sh               ## ##    created by cndba.cn                 ## ##        2016-1-11                         ## #####################################################

cat xtrabackup_mysql.sh #!/bin/bash #title :xtrabackup_mysql.sh #description :backup mysql by using xtrabackup #author :weavepub #date :20190529 #version :1.0 #crontab :0 */2 * * * sh /usr/local/bin/xtrabackup_mysql.sh >>/opt/log/xtrabackup_mysql.ou

mysql全量备份.增量备份.开启mysql的logbin日志功能.在/etc/my.cnf文件中加入以下代码: [mysqld]log-bin = "/home/mysql/logbin.log"binlog-format = ROWlog-bin-index = "/home/mysql/logindex"binlog_cache_size=32mmax_binlog_cache_size=512mmax_binlog_size=512m 重启mysql即可.其

在日常运维工作中,对mysql数据库的备份是万分重要的,以防在数据库表丢失或损坏情况出现,可以及时恢复数据. 下面对这种备份方案详细说明下:1.MySQLdump增量备份配置执行增量备份的前提条件是MySQL打开binlog日志功能,在my.cnf中加入log-bin=/opt/Data/MySQL-bin“log-bin=”后的字符串为日志记载目录,一般建议放在不同于MySQL数据目录的磁盘上. mysqldump >       导出数据 mysql <           导入数据  (

一.简介 源码地址 日期:2018/4/12 介绍:复制Binlog日志方式的增量备份脚本,并保存固定天数的备份 效果图: 二.使用 适用:centos6+ 语言:中文 注意:使用前先修改脚本中变量 下载 wget https://raw.githubusercontent.com/goodboy23/shell/master/jobs/mybak_section.sh 执行 bash mybak_section.sh

1.首先在my.cnf下添加二进制文件路径(windows下文件名称为my.ini) 在[mysqld]下添加 log-bin=mysql-bin 2.centos下默认安装mysql 5.6,数据默认文件夹下为 /var/lib/mysql 3.编写脚本 #!/bin/bash#echo 增量备份#MySQL增量备份脚本 一般在slave从库上运行 ,开启log_save_updates=1#path #备份文件路径BakDir=/usr/work/mysql/bak.logecho $Bak

构建高安全电子商务网站之(网站文件及数据库自动本地/异地双备份)架构图 继续介绍Linux服务器文件备份,数据库备份,数据安全存储相关的电子商务系统架构.针对安全性有多种多样的解决方案,其中数据备份是重中之重的首要工作.电 子商务网站更加注重考虑数据安全,数据备份方案,包括本地备份.异地备份架构.其中Linux服务器的备份方案非常多,本文介绍一个大众化适用的解决方 案,通过编写Shell脚本来完成自动备份.本架构包括备份网站文件.数据库,自动本地备份并FTP上传备份脚本,完成相应本地备份.异地备

1.相关参数介绍: 命令行参数 描述 TARGET 为目标数据库定义的一个连接字符串,当连接到一个目标数据库时,该连续是SYSDBA连接.该用户拥有启动和关闭数据库的权利,必须属于OSDBA组,必须建立一个口令文件允许SYSDBA连接. CATALOG 连接到恢复目录. NOCATALOG 不运用恢复目录.与CATALOG参数互斥 CMDFILE 定义了输出命令文件名称的字符串.当运行RMAN时,可以运行命令文件或者交互式运行 LOG & MSGLOG 定义了包含RMAN输出信息的文件的字符串,

还有一种简单的方法 参考 https://blog.csdn.net/u010098331/article/details/50932064 (注意:5.6版本以上新加了gtid 功能,gtid开启之后,默认不执行已经执行过的事务.直接还原是还原不了的,所以将二进制文件倒成sql文件时或二进制直接还原时:要加--skip-gtids参数或是要重新建个实例,将数据恢复到这个新建的实例里.我个人认为加参数好使) 其实就是  将二进制文件倒成sql文件例: mysqlbinlog --skip-gti

MySQLdump是MySQL自带的导出数据工具,即mysql数据库中备份工具,用于将MySQL服务器中的数据库以标准的sql语言的方式导出,并保存到文件中.Mysqldump是一个客户端逻辑备份的工作,备份的SQL文件可以在其他MySQL服务器上进行还原. 如需备份,则至少需要对该表的select权限,需要备份视图则需要改账户具有SHOW VIEW权限,触发器需要TRIGGER.如需锁表,则不可使用--single-transaction选项.其他权限暂未列出.如需还原,则需要对应的执行权限,

前面总结过一篇全量备份/增量备份/差异备份说明,下面介绍下linux下rsync和tar两种增量备份的操作记录: 1)rsync备份 rsync由于本身的特性,在第一次rsync备份后,以后每次都只是传内容有改变的部分,而不是全部传.所以,rsync在做镜像方面是很不错的,只传增量,节省带宽.时间. 常规本地rsync备份命令可以是: # rsync -az --delete SRC DST 其中: -z 压缩 -a 简单理解就是保持一致性 --delete 严格保证DST内容与SRC一致,即D