定时备份rsync(增量备份,无差异备份,daemon进程)+crontab,主要备份一些任务脚本和配置文件,如果此时有用户增加数据,

如果是增量备份的话不会备份下来,因为在备份的那一刻,数据已经被锁定了,所以定时的备份最好备份点为用户不操作数据时进行;

tar命令 和rsync命令使用时如果相同的文件更新时,会自动覆盖,mkdir -p:有目录就用现有的目录,无目录会创建,

touch当有相同的文件时只改变时间戳,而不改变内容,不报错有助于随时随地的备份,sync对比后没有更新的文件不会传送,

对比很浪费时间,因此需要优化这个;

5.1、在rsync备份服务器上,配置rsync服务:

服务端成功配置rsync,并在客户端成功推送

5.2、在客户端nfs服务器上,实现打包,推送,删除,定时任务推送:

打包:tar zcvfh /backup/backup_$(date +%F).tar.gz var/spool/cron/root etc/rc.local etc/sysconfig/iptables var/www/html app/logs

#h表示打包这个软链接对应的原文件

推送:rsync -avz /backup/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password

删除: find /backup/ -type f -name "*.tar.gz" -mtime +7| xargs rm -vf

(1)写入脚本文件:

[root@nfs01 /]# mkdir -p /server/scripts

[root@nfs01 /]# cd /server/scripts

[root@nfs01 scripts]# vim bak.sh

#!/bin/sh

export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin

Ip=$(ifconfig eth1 | awk -F "[ :]+" 'NR==2 {print $4}')

Path=/backup

if [ $(date +%w) -eq 0 ]

then

Time=week_$(date +%F_%w -d -1day)

else

Time=$(date +%F -d -1day)

fi

cd /

mkdir $Path/$Ip/ -p

tar zcfh $Path/$Ip/backup_${Time}.tar.gz var/spool/cron/root etc/rc.local etc/sysconfig/iptables var/www/html app/logs

md5sum $Path/$Ip/backup_${Time}.tar.gz >$Path/$Ip/flag_${Time}.log

rsync -az $Path/ rsync_backup@172.16.1.41::backup/ --password-file=/etc/rsync.password

find $Path/ -type f -mtime +7 \( -name "*.tar.gz" -o -name "*.log" \) |xargs rm -f

chmod u+x /server/scripts/bak.sh

(2)定时任务:

crontab -e

00 00 * * * /bin/sh /server/scripts/bak.sh >/dev/null 2>&1

#每天的零点启动脚本如果更改日期比如2018/10/20 此时会导致脚本直接运行

[root@m01 ~]# date +%Y_%m_%d\ %H:%M:%S

2018_10_20 14:33:52

5.3、在rsync备份服务器上做检查,发邮件给管理员 (只对当天备份的内容进行校验和发送,删除除180天以前除周六的备份文件和数据)

(1)写入脚本:

[root@nfs01 /]# mkdir -p /server/scripts

[root@nfs01 /]# cd /server/scripts

[root@nfs01 scripts]# vim check_del_data.sh

#!/bin/sh

export PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin

LANG=en

Path=/backup

if [ $(date +%w) -eq 0 ]

then

Time=week_$(date +%F_%w -d -1day)

else

Time=$(date +%F -d -1day)

fi

find $Path/ -type f -name "flag_${Time}.log" |xargs md5sum -c >>$Path/flag_${Time}_md5sum_result.log 2>&1

mail -s "$Time bak result" hyjy2504164765@163.com <$Path/flag_${Time}_md5sum_result.log

find $Path/ -type f -mtime +180 ! -name "*week*6*" |xargs rm -f

chmod u+x /server/scripts/bak.sh

(2)定时任务:

crontab -e

00 06 * * * /bin/sh /server/scripts/check_del_data.sh >/dev/null 2>&1 #在数据传输完成时再校验和删除

(3)发送邮件:

A、163邮箱设置:

B、

vim /etc/mail.rc

set from=hyjy2504164765@163.com smtp=smtp.163.com smtp-auth-user=hyjy2504164765 smtp-auth-password=linux123 smtp-auth=login #163邮箱

5.4、邮箱服务介绍:

#安装mailx邮件服务

yum install mailx -y

#配置文件追加信息(/etc/mail.rc)

vim /etc/mail.rc

#发件人信息

set from=hyjy2504164765@163.com smtp=smtp.163.com smtp-auth-user=hyjy2504164765 smtp-auth-password=linux123 smtp-auth=login

from=hyjy2504164765@163.com #发件人邮箱地址(163设置得开起允许代理)

smtp=smtp.163.com #smtp地址

smtp-auth-user=hyjy2504164765 #邮箱用户名,不用加域名

smtp-auth-password=linux123 #邮箱密码(邮件密码是smtp代理授权码)

smtp-auth=login #邮箱验证方式

#测试发送

echo "邮件内容" | mail -s "标题" 邮箱地址

echo "hello world" | mail -s "hello" hyjy2504164765@163.com

#最好把你的发送邮件地址加入你接收邮箱的白名单,不然发多了可能被认为发送垃圾邮件而被163拒绝,这是真的

5、rsync全网备份的更多相关文章

  1. rsync全网备份low方法

    要求: 1.基本备份要求已知3 台服务器主机名分别为web01.backup .nfs01,主机信息见下表:服务器说明外网IP(NAT) 内网IP(NAT) 主机名称nginx web 服务器10.0 ...

  2. day10、nfs+rsync全网备份及实时同步

    题目要求 注意:博主使用的系统为: [root@web01 ~]# uname -a Linux web01 2.6.32-696.el6.x86_64 #1 SMP Tue Mar 21 19:29 ...

  3. rsync全网备份

    rsync备份企业方案 企业有Linux服务器又有windows服务器,备份用rsync(服务端),Linux(客户端),Windows(客户端,cwrsync,旧版本有免费版)打包压缩数据往服务器上 ...

  4. 全网备份脚本rsync

    一,服务端配置 #!/bin/sh ######################################################### #by:kingle # #use: confi ...

  5. Centos6.9 搭建rsync服务端与客户端 案例:全网备份项目

    rsync的企业工作场景说明 1)定时备份 1.1生产场景集群架构服务器备份方案项目 借助cron+rsync把所有客户服务器数据同步到备份服务器 2)实时复制 本地数据传输模式(local-only ...

  6. ansible-playbook 实战案例 全网备份 实时备份

    目录 ansible-playbook 基础介绍 1.YAML三板斧 2. ansible playbook 安装apache 示例 案例 全网备份 实时备份 环境规划 目录规划 base.yaml ...

  7. rsync实时备份备份服务搭建和使用指南

    一.Rsync企业工作场景说明: 1.利用定时任务+rsync方式实现数据同步 对于网站内部技术人员创建的数据,可以采取定时任务的方式 2.利用实时任务+rsync方式实现数据同步 对于网站外部访问用 ...

  8. nfs详解及实现全网备份

    1.统一hosts cat /etc/hosts 172.16.1.5 lb01 172.16.1.6 lb02 172.16.1.7 web02 172.16.1.8 web01 172.16.1. ...

  9. linux运维、架构之路-全网备份项目方案

    一.项目需求说明 某公司有多台服务器,里面的数据很重要,如果磁盘坏了,数据就会丢失,所以公司要求把重要服务器数据备份以便出现问题时可以进行恢复,要求:每天晚上00点整在所有服务器上打包备份系统配置文件 ...

随机推荐

  1. [Java] 数据分析 -- 回归分析

    线性回归 需求:从文件读取数据对,计算回归函数及系数 实现1:commons.math的SimpleRegression,定义函数getData从文件读取数据返回SimpleRegression类 1 ...

  2. head元素的内容

    一.head元素 head元素的内容用来向浏览器提供一些文档信息,此外还可以包含js脚本和css层叠样式单.head中一般包含title.meta.css.js等内容,head中元素的内容在浏览器中不 ...

  3. CENTOS7network config文件不能直接bak 必须建立bak目录再bak

    CENTOS7network config文件不能直接bak 必须建立bak目录再bak

  4. k8s集群部署(2)

    一.利用ansible部署kubernetes准备阶段 1.集群介绍 基于二进制方式部署k8s集群和利用ansible-playbook实现自动化:二进制方式部署有助于理解系统各组件的交互原理和熟悉组 ...

  5. qt利用QT designer构建第一个界面helloworld工程

    qt利用QT designer构建第一个界面helloworld工程原创ZJE_ANDY 发布于2017-04-07 20:25:28 阅读数 6613 收藏展开第一步:点击New Project 第 ...

  6. LTC3780 工作原理分析

    流程分析 当 CV调节 调节顺时针调节CV的时候 接入电路部分的电阻变大 Vosense变小 LTC内部的误差放大器 输出的变大 LTC内部逻辑调节 增大电压 我估计最终电压还是大约800mv左右 可 ...

  7. webpack(2)--webapck自身的配置

    上一记介绍了webpack的安装和基本配置,本记将描述webpack自身的配置 一:指定webpack入口以及出口目录以及输出文件 相信读者在看完上一记后会有一点疑惑:为什么运行webpack要配置s ...

  8. GO学习-(35) Go实现日志收集系统4

    Go实现日志收集系统4   到这一步,我的收集系统就已经完成很大一部分工作,我们重新看一下我们之前画的图: 我们已经完成前面的部分,剩下是要完成后半部分,将kafka中的数据扔到ElasticSear ...

  9. Docker学习(10) Docker的远程访问

    Docker的远程访问 只需配置

  10. JavaFx 创建快捷方式及设置开机启动

    原文地址:JavaFx 创建快捷方式及设置开机启动 | Stars-One的杂货小窝 原本是想整个桌面启动器,需要在windows平台上实现开机启动,但我的软件都是jar文件,不是传统的exe文件,也 ...