mysql增量备份(2/2)
前言
这是在百度文库里看到的文章,原名叫做《MYSQL 完全与增量备份及恢复文档 》,是关于完全备份和增量备份以及恢复文档的......
文档介绍
本文档采用 mysqldump 对数据库进行备份,mysqldump 是采用 SQL 级别的备份机制,它将数据表导成 SQL 脚本文件,在不同的 MySQL 版本之间升级时相对比较合适,这也是最常用的备份方法,mysqldump 比直接拷贝要慢些。
本文描述 Mysql 数据库的自动备份,包括完全备份和增量备份。其中,完全备份每周六执行一次,系统自动保存最近一个月的备份文件,增量备份每天都会执行,系统自动保存最近 35 天的备份文件。
备份策略布置
(1). 创建备份目录与文件
- Shell> mkdir /srv/bakmysql
- Shell> mkdir /srv/bakmysql/daily
- Shell> touch /srv/bakmysql/mysqlbak.log
- Shell>
(2). 启用二进制日志
采用 binlog 的方法相对来说更灵活,省心省力,而且还可以支持增量备份。
启用 binlog 时必须要重启 mysqld。首先,关闭 mysqld,打开 /etc/my.cnf,加入以下
几行:
- [mysqld]
- log‐bin
然后启动 mysqld 就可以了。
运行过程中会产生 HOSTNAME‐bin.000001 以及 HOSTNAME‐bin.index,前面的文件是 mysqld 记录所有对数据的更新操作,后面的文件则是
所有 binlog 的索引,都不能轻易删除。关于 binlog 的更详细信息请查看手册。
(3). 设置 crontab 任务,每天执行备份脚本
- shell> vi /etc/crontab
添加以下:
- #每个星期六凌晨 : 执行完全备份脚本
- * * root /usr/sbin/mysqlfullbak
- #每天凌晨 : 做增量备份
- * * *root /usr/sbin/mysqldailybak
(4). 使用 SSH 将 mysqldailybak mysqlfullbak rmbackup 三个文本内容放到系统/usr/sbin
目录下相应的文件中,并且添加可执行权限,如:chmod +x rmbackup
脚本内容
完全备份脚本:
- #!/bin/bash
- # Name:mysqlfullbak
- # This is mysql mysqlfullbak scripts
- # By song
- # Last Modify:‐‐
- #定义脚本存放路径
- scriptsDir=/usr/sbin
- #定义用户名及密码
- user=root
- userPWD=
- #定义要备份的数据库
- database=castor
- #定义完全备份文件存放路径
- bakDir=/srv/bakmysql
- eMailFile=$bakDir/email.txt
- eMail=sdesong@.com
- #定义日志文件
- LogFile=$bakDir/mysqlbak.log
- DATE=`date +%Y%m%d`
- echo " " >> $LogFile
- echo " " >> $LogFile
- echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $LogFile
- echo $(date +"%y‐%m‐%d %H:%M:%S") >>$LogFile
- echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $LogFile
- cd $bakDir
- DumpFile=$DATE.sql
- #GZDumpFile=$DATE.sql.tgz
- mysqldump ‐‐flush‐logs ‐u$user ‐p$userPWD ‐‐quick $database >$DumpFile
- echo "Dump Done" >> $LogFile
- #tar cvzf $GZDumpFile $DumpFile >> $LogFile >&
- #echo "[$GZDumpFile]Backup Success!" >> $LogFile
- echo "[$DumpFile]Backup Success!" >> $LogFile
- #Delete old backup files(mtime>)
- $scriptsDir/rmbackup
- #Delete previous daily backup files:完整备份后,删除增量备份的文件,只保留最近 天的增量备份文件
- daily_databakDir=$bakDir/daily
- cd $bakDir/daily
- find $daily_databakDir ‐name "daily*" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
- #发送邮件通知
- #cat $eMailFile | mail ‐s "MySQL Backup" $eMail
增量备份脚本:
- #!/bin/bash
- # Name:mysqldailybak
- # This ia mysql mysqldailybak scripts
- # By songdesong
- # Last modify:‐‐
- #定义用户名及密码
- user=root
- userPWD=
- #定义数据库
- database=castor
- /usr/bin/mysqladmin ‐u$user ‐p$userPWD flush‐logs
- daily_databakDir=/srv/bakmysql/daily
- #定义 MYSQL 数据目录
- mysqlDataDir=/srv/mysql/
- eMailFile=$daily_databakDir/email.txt
- eMail=sdesong@.com
- DATE=`date +%Y%m%d`
- logFile=$daily_databakDir/mysql$DATE.log
- echo " " > $eMailFile
- echo "‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $eMailFile
- echo $(date +"%y‐%m‐%d %H:%M:%S") >> $eMailFile
- echo "‐‐‐‐‐‐‐
- ‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐‐" >> $eMailFile
- TIME=$(date "‐d 10 day ago" +%Y%m%d%H%M%S)
- StartTime=$(date "‐d 1 day ago" +"%Y‐%m‐%d %H:%M:%S")
- echo “Delete days before the log” >>$eMailFile
- mysql ‐u$user ‐p$userPWD ‐e "purge master logs before ${TIME}" && echo "delete 10 days
- before log" |tee ‐a $eMailFile #删除 10 天前的 2 进制文件
- filename=`cat $mysqlDataDir/mysqld‐bin.index |awk ‐F "/" '{print $2}'` # 进制文件
- for i in $filename
- do
- echo "$StartTime start backup binlog" >> $eMailFile
- mysqlbinlog ‐u$user ‐p$userPWD ‐d $database ‐‐start‐datetime="$StartTime"
- $mysqlDataDir/$i >> $daily_databakDir/daily$DATE.sql |tee ‐a $eMailFile
- done
- if [ $? = ]
- then
- # 删除 mtime> 的增量日志备份文件
- find $daily_databakDir ‐name "*.log" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
- cd $daily_databakDir
- #tar ‐cvzf $daily_databakDir/$database$DATE.tar.gz daily$DATE.sql >>/dev/null &
- #scp 至另一台服务器
- echo "Daily backup succeed" >> $eMailFile
- else
- echo "Daily backup fail" >> $eMailFile
- mail ‐s "MySQL Backup" $eMail < $eMailFile #备份失败之后发送邮件通知
- fi
- cat $eMailFile > $logFile
- # 删除 mtime> 的增量日志备份文件
- find $daily_databakDir ‐name "*.log" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
删除完全备份文件脚本:
- #!/bin/sh
- # Name:rmBackup
- # PS:Delete old Backup.
- # By:song
- # Last Modify:‐‐
- #
- # 定义备份目录
- dataBackupDir=/srv/bakmysql
- # 删除 mtime> 的日志备份文件
- find $dataBackupDir ‐name "*.sql" ‐type f ‐mtime + ‐exec rm {} \; > /dev/null >&
数据库恢复:
完全备份文件的恢复
完全备份文件的格式为:20110301.sql
登录 MYSQL(mysql –uroot –proot)
use castor;
source /home/20110301.sql
增量备份文件的恢复
增量备份文件的格式为:daily20110302.sql
use castor;
source /home/ daily20110302.sql
mysql增量备份(2/2)的更多相关文章
- innobackupex做MySQL增量备份及恢复【转】
创建备份用户 mysql> grant process,reload,lock tables,replication client on *.* to 'backup'@'localhost' ...
- MYSQL数据库自动本地/异地双备份/MYSQL增量备份
构建高安全电子商务网站之(网站文件及数据库自动本地/异地双备份)架构图 继续介绍Linux服务器文件备份,数据库备份,数据安全存储相关的电子商务系统架构.针对安全性有多种多样的解决方案,其中数据备份是 ...
- windows下mysql增量备份与全备份批处理
win下的全备批处理 批处理用于游戏服务器,经过严格测试,且正式使用,主要用来完全备份数据库,当然.这只是将数备份出来 ,至于如何将备份出来的数据远程传送的远程服务器上可以调用ftp的功能,此脚本并未 ...
- mysql增量备份 percona-xtrabackup
先说下实际环境 阿里云买的ESC跑的mysql服务,目前由于数据量过大,数据库目前有800多GB,每次全备需要等20多个小时才能够完成,然后就想到做增量备份,写下此文档 一.测试环境 [root@lo ...
- 【转】mysql增量备份恢复实战企业案例
来源地址:http://seanlook.com/2014/12/05/mysql_incremental_backup_example/ 小量的数据库可以每天进行完整备份,因为这也用不了多少时间,但 ...
- mysql增量备份脚本
#!/bin/sh ############################### # 此脚本用来增量备份 # 此文件名:mysqldailybackup.sh # # Author: zhangro ...
- mysql增量备份(1/2)
转自:http://www.centos.bz/2012/11/mysql-incremental-backup/ 小量的数据库我们可以每天进行完整备份,因为这也用不了多少时间,但当数据库很大时,我们 ...
- Mysql 增量备份和全量备份
全量备份: # vim /root/DBFullyBak.sh //添加以下内容 #!/bin/bash # Program # use mysqldump to Fully backup mysql ...
- python:mysql增量备份
模块:MySQLdb Crypto加密 ConfigParser加载配置 mydb.py #!/usr/bin/env python #coding=utf-8 import MySQLdb as m ...
随机推荐
- k8s的chart学习(下)
1.开发自己的chart Kubernetes 给我们提供了大量官方 chart,不过要部署微服务应用,还是需要开发自己的 chart,下面就来实践这个主题. 1.1创建 chart 执行 helm ...
- k8s通过secret管理敏感信息
应用启动过程中可能需要一些敏感信息,比如访问数据库的用户名密码或者秘钥.将这些信息直接保存在容器镜像中显然不妥,Kubernetes 提供的解决方案是 Secret. Secret 会以密文的方式存储 ...
- NumPy、SciPy 等Python包在Windows下的whl安装包下载
http://www.lfd.uci.edu/~gohlke/pythonlibs/ 感谢加利福尼亚大学尔湾分校(University of California, Irvine)荧光动力实验室(瞎翻 ...
- yii2 项目初始化
yii 项目目录下执行.composer self-updatecomposer global require "fxp/composer-asset-plugin:^1.4.1" ...
- (5)python 字符串和输入输出
一.字符串转义 字符串可以包含任何字符可以用单引号也可以用双引号 a='hello' a="hello" 如果字符串中存在单引号,可以用双引号里包含单引号的方式 a="I ...
- python formatters 与字符串 小结 (python 2)
最近学习python 2 ,觉得有必要小结一下关于字符串处理中的formatters, 转载请声明本文的引用出处:仰望大牛的小清新 0.%进行变量取值使用的时机 在python中,如果我们只是需要在字 ...
- python3爬取百度图片(2018年11月3日有效)
最终目的:能通过输入关键字进行搜索,爬取相应的图片存储到本地或者数据库 首先打开百度图片的网站,搜索任意一个关键字,比如说:水果,得到如下的界面 分析: 1.百度图片搜索结果的页面源代码不包含需要提取 ...
- Swift中混编OC第三方库
现在Swift的第三方库还比较少,有时候需要使用OC的第三方库,其实也是很容易的. 我们使用如下步骤: 1.新建的Swift项目,第一次创建OC文件时会询问是否生成 桥接头,选择是的话会生成一个桥 ...
- Java下String和List<String>的互相转换
// List转换为String数组 List<String> list = new ArrayList<String>(); list.add("a1") ...
- 让旧的的Mac也能免费安装keynote
苹果在美国时间9月10日上午10时,将免费iworks. 听到此消息,我心情激动. 立马升级了操作系统 . 然后搜索keynote ,发现还是收费的. 非常郁闷.. 上网上了解,有如下说明: 20 ...