mysql数据库使用脚本实现分库备份过程

一条命令解决分库分表备份：

[root@db01 data]# mysql -uroot -p123456  -e "show databases;"|egrep -v "Data|sche|mysql|inf"|sed -r 's#^(.*)#mysqldump -uroot -p123456 -B \1 >/data/db/\1.sql.gz#g'|bash

实现思路

1）编程思想

mysqldump db1>db1.sql

mysqldump db2>db2.sql

.............

2)显示要备份的数据库

[root@web03 ~]# mysql -uroot -p123456 -S /data//mysql.sock  -e "show databases;"|grep -Evi "database|infor|perfor"
abcdocker
cnsyk
mysql
oldboy
syk_utf8
test

3）循环db，dump

实现脚本如下：

#!/bin/bash
#created by yangqiqi -- 
 
USERNAME=root #备份的用户名
PASSWORD=  #备份的密码
HOST=localhost #备份主机
DATE=`date +%Y-%m-%d`  #用来做备份文件名字的一部分
OLDDATE=`date +%Y-%m-%d -d '-10 days'`  #本地保存天数  
 
#指定命令所用的全路径
MYSQL=/application/mysql/bin/mysql
MYSQLDUMP=/application/mysql/bin/mysqldump
MYSQLADMIN=/application/mysql/bin/mysqladmin
 
#创建备份的目录和文件
BACKDIR=/data/backup/db
[ -d ${BACKDIR} ] || mkdir -p ${BACKDIR}
[ -d ${BACKDIR}/${DATE} ] || mkdir ${BACKDIR}/${DATE}
[ ! -d ${BACKDIR}/${OLDDATE} ] || rm -rf ${BACKDIR}/${OLDDATE} #保存10天 多余的删除最前边的
#开始备份  for循环想要备份的数据库
MYSQLDUMP_LIST=`mysql -uroot -p'' -S /data//mysql.sock  -e "show databases"| grep -Evi "database|infor|perfor"`
 
for DBNAME in ${MYSQLDUMP_LIST} ##使用for依次罗列需要备份的数据库
do
  ${MYSQLDUMP} -B -F --master-data= --single-transaction -u${USERNAME} -p${PASSWORD}  -S /data//mysql.sock  ${DBNAME} | gzip > ${BACKDIR}/${DATE}/${DBNAME}-backup-${DATE}.sql.gz
  /bin/sleep
  logger "${DBNAME} has been backup successful - $DATE"
done
脚本出处：https://www.cnblogs.com/lazyball/p/8662586.html

脚本注意点：

MYSQLDUMP_LIST=`mysql -uroot -p'123456'  -e "show databases"| grep -Evi "database|infor|perfor"` 过滤掉不需要备份的数据库，这里需要注意，过滤完成
后拿到的库名是自己需要备份的库名，如果自建的库有的也叫infor开头或者perfor的可能会被过滤掉，按照个人情况调整。

每天的备份样式如下：

[root@web03 ~]# cd /data/backup/db/
[root@web03 db]# ll
总用量
drwxr-xr-x  root root  7月    : --
[root@web03 db]# cd --/
[root@web03 --]# ll
总用量
-rw-r--r--  root root     7月    : abcdocker-backup--
-rw-r--r--  root root     7月    : cnsyk-backup---
-rw-r--r--  root root  7月    : mysql-backup---
-rw-r--r--  root root     7月    : oldboy-backup---
-rw-r--r--  root root     7月    : syk_utf8-backup--
-rw-r--r--  root root    7月    : test-backup---

logger解释

logger 是一个shell 命令接口，可以通过该接口使用Syslog的系统日志模块，还可以从命令行直接向系统日志文件写入一行信息。
日志的级别
日志的级别分为七级，从紧急程度由高到底：
emerg 系统已经不可用，级别为紧急
alert 警报，需要立即处理和解决
crit 既将发生，得需要预防。事件就要发生
warnig 警告
err 错误信息，普通的错误信息
notice 提醒信息，很重要的信息
info 通知信息，属于一般信息
debug 这是调试类信息

上边的脚本备份完毕后就可以在看到每个数据库备份的信息 logger的作用

[root@web03 ~]# tail -f /var/log/messages
Jul   :: web03 rpc.statd[]: Version 1.2. starting
Jul   :: web03 sm-notify[]: Version 1.2. starting
Jul   :: web03 root: abcdocker has been backup successful - --
Jul   :: web03 root: cnsyk has been backup successful - --
Jul   :: web03 root: abcdocker has been backup successful - --
Jul   :: web03 root: cnsyk has been backup successful - --
Jul   :: web03 root: mysql has been backup successful - --
Jul   :: web03 root: oldboy has been backup successful - --
Jul   :: web03 root: syk_utf8 has been backup successful - --
Jul   :: web03 root: test has been backup successful - --

生成场景需求：

每天凌晨1点把 A服务器上/data/backup/db/下的数据备份文件放到 B服务器里的/data/backup/db_192.168.1.11/目录下

不是累加是增量更新（--delete）

A服务器：
数据源服务器:

yum install rsync

打开防火墙关闭seLinux:

-A INPUT -p tcp -m state --state NEW -m tcp --dport 873 -j ACCEPT

B服务器：ssh-keygen

把公钥文件里的id_rsa.pub内容复制到 A服务器里的authorized_keys 
文件中准备脚本文件  :

#!/bin/bash
usr/bin/rsync -avz --delete -e  "ssh -p 4396"  root@192.168.1.11:/data/backup/db  /data/backup/db_192.168.1./
logger "Successful backup file transfer - $DATE"