在日常运维工作中,我们经常用到rsync这个同步神器.有时在同步两个目录时,会要求删除目标目录中比源目录多出的文件,这种情况下,就可用到rsync的--delete参数来实现这个需求了. 实例说明:在服务器A上同步/tmp/work目录到远程服务器B的/tmp/work目录下(A和B已经提前做好ssh无密码信任跳转关系了),同时删除B服务器/tmp/work目录下相比于A服务器/tmp/work中多余的文件最近在处理策划资源文件的时候需要将目录A的文件全部同步到目录B的文件,并且把目录B内多余的

rsync --delete-before -avH --progress --stats /tmp/empty/ /var/spool/postfix/maildrop/ 由于业务侧使用时,一些脚本文件写的不够严谨,造成/var/spool/postfix/maildrop/目录经常被用户通知邮件文件堆满.而通过rm  -rf * 删除时,会提示-bash: /bin/rm: Argument list too long .通过ls |xargs rm -rf 进行删除时也耗时较长,这里可以通

Rsync详解 1.什么是RsyncRsync(remote synchronize)是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件.Rsync使用所谓的“Rsync算法”来使本地和远 程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快. Rsync本来是用于替代rcp的一个工具,目前由rsync.samba.org维护,所以rsync.conf文件的格式类似于samba的主配 置文件.Rsync可以通过rsh或ssh使用,

rsync介绍 rsync是一款开源的.快速的.多功能的.可实现全量及增量的本地或远程数据同步备份工具 在常驻模式(daemon mode)下,rsync默认监听TCP端口873,以原生rsync传输协议或者通过远程shell如RSH或者SSH提供文件.SSH模式下,rsync客户端运行程序必须同时在本地和远程机器上安装. 全量与增量 全量:将全部数据进行传输覆盖 增量:只传输差异部分的数据 rsync通过独特的"quick check"算法,实现增量数据传输 rsync的功能 类似与

目录 Rsync的工具剖析与使用 0.Rsync的介绍 1.Rsync的特性 2.Rsync的部署安装 3.搭建远程备份系统. Rsync的工具剖析与使用 0.Rsync的介绍 rsync是Linux系统下的文件同步和数据传输工具,它基于"delta-transfer"算法闻名遐迩,保证客户端和远程服务器端之间的文件同步,rsync可以支持断点续传:rsync只传输源文件和目标文件之间不一致的部分:rsync支持执行完整备份和增量备份. 1.Rsync的特性 镜像整个目录树和文件系统

备份服务笔记====================================================================== Rsync是一款开源的.快速的.多功能的.可实现全量及增量的本地或远程数据同步备份的优秀工具.并且可以不进行改变原有数据的属性信息,实现数据的备份迁移特性.Rsync软件适用于unix/linux/windows等多种操作系统平台.Rsync是一个快速和非常通用的文件复制工具.它能本地复制,远程复制,或者远程守护进程方式复制.它提供了大量的参数

自己动手部署一遍 期中架构-第二章-备份服务笔记====================================================================== 01. 课程回顾 根据思维导图回顾了上节课内容 02. rsync服务介绍 属于一款实现全量及增量复制同步的软件工具 03. rsync服务命令简单应用(1v4的应用效果) ①. rsync == cp [root@backup ~]# # rsync == cp效果 [root@backup ~]# cp

rsync介绍 rsync是一款开源的.快速的.多功能的.可实现全量及增量的本地或远程数据同步备份工具 在常驻模式(daemon mode)下,rsync默认监听TCP端口873,以原生rsync传输协议或者通过远程shell如RSH或者SSH提供文件.SSH模式下,rsync客户端运行程序必须同时在本地和远程机器上安装. 全量与增量 全量:将全部数据进行传输覆盖 增量:只传输差异部分的数据 rsync通过独特的“quick check”算法,实现增量数据传输 rsync的功能 类似与cp命令 

1.什么是Rsync Rsync(remote synchronize)是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件.Rsync使用所谓的“Rsync算法”来使本地和远 程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快. Rsync本来是用于替代rcp的一个工具,目前由rsync.samba.org维护,所以rsync.conf文件的格式类似于samba的 主配置文件.Rsync可以通过rsh或ssh使用,也能以daem

参考 http://www.cnblogs.com/itech/archive/2009/08/10/1542945.html 模式1 本地直接拷贝, 这个其实是调用了 cp 命令, 跟 rsync 服务器, 客户端无关. /usr/myapp/logs 是本地日志目录 rsync /usr/myapp/logs /usr/myapp/logs2 // 出现 skipping directory logs 错误, 拷贝目录, 需要加 r 参数, 如下 rsync -r /usr/myapp/lo

其中:id_rsa为私钥文件,id_rsa.pub为公钥文件 ssh-copy-id  -i ~/.ssh/id_rsa.pub  "-p 2122  root@IP " 我的:ssh-copy-id "-p 10173 clouder@62.136.164.130" rsync 同步远程机器的文件到本地: rsync -avrH -e  'ssh -p 10173'  clouder@65.146.164.220:/home/clouder/rsync/ /hom

1.守护进程方式(socket)  语法: Access via rsync daemon: Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST] rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST] Push: rsync [OPTION...] SRC... [USER@]HOST::DEST(DEST为模块名字) rsync [OPTION...] SRC... rsync://

上篇 Rsync rysnc查看版本   --version 全量  与增量在效率上有区别 cp mv scp  --全量复制 rsync       --增量复制 rsync利用的是quick check算法 rsync可以替换的命令   scp   cp  ls   rm cp与rsync   rsyncs 是增量部分  利用quick check算法 cp文件 [root@backup ~]# cp /etc/hosts /oldboy_dir/ [root@backup ~]# ls /

首先分别介绍inotify 与 rsync的使用,然后用两者实现实时文件同步,最后说一下这样的系统存在什么样的问题. 1. inotify 这个具体使用网上很多,参考 inotify-tools 命令使用讲解 Inotify 内核版本支持 从 kernel 2.6.13 开始, Inotify 正式并入内核,RHEL5 已经支持. 看看是否有 /proc/sys/fs/inotify / 目录,以确定内核是否支持 [root@RHEL5 Rsync]# ls -l /proc/sys/fs/in

Rsync 排错案例解析 原文:http://blog.51cto.com/irow10/1827306 错误一. 执行计划任务的备份脚本后没有看到备份的文件 1.首先查看crontab日志是否执行文件 查看日志/var/log/cron,发现脚本正常执行. 2.查看备份服务器的rsync服务器是否启动及查看rsync执行日志 经检查发现rsync服务正常,但是日志无任何信息显示. 3.查看系统邮件,如果计划任务出错会邮件发送错误. 经查勘发现脚本确实按时执行,但出现问题没有执行成功! 1 2

一般使用默认端口的话, 在服务端的启动命令为: /usr/bin/rsync --address=192.168.1.23 --daemon 如果在客户端需要换另外的端口侦听, 则使用 /usr/bin/rsync --address=172.18.16.89 --port=8081 --daemon 客户端命令: /usr/bin/rsync -vzrc --progress --bwlimit=300 /usr/local/tomcat/webapps/.gif 172.18.16.89::

rsync 简介 什么是rsync rsync是一款开源的,快速的,多功能的,可实现全量及增量的本地或远程数据同步备份的优秀工具. 全量:将全部数据,进行传输覆盖 增量:只传输差异部分的数据 实现增量复制原理 Rsync通过其独特的"快速检查"算法,实现增量传输数据 [root@backup ~]#man rsync Rsync finds files that need to be transferred using a "quick check" algorit

1.rsync快速删除文件 rsync --delete -avH /empty /rmdir 选项说明: –delete-before 接收者在传输之前进行删除操作 –progress 在传输时显示传输过程 -a 归档模式,表示以递归方式传输文件,并保持所有文件属性 -H 保持硬连接的文件 -v 详细输出模式 -stats 给出某些文件的传输状态 2.快速复制一下小文件 find -name '*.jpg' -print > jpg.txt tar -cvzf jpg.tar.gz -T jp

inode问题故障1例故障关键字:ext3_dx_add_entry: Directory index full! 线上业务的一台服务器无缘无故突然挂了让机房帮忙连接显示器后发现报错 http://image.kbnix.com/Blog/monitor_error.jpg 遂让机房重启了 重启后能正常进入系统,查看/var/log/message后,依然发现有这个报错,而且是持续了很久了,看来是没关注好这类型错误 先是马上查看了硬盘的inode数 df -i看,没有异常,inode use采用

昨天,我看到一个非常有趣的删除一个目录下的海量文件的方法.这个方法来自http://www.quora.com/How-can-someone-rapidly-delete-400-000-files里的Zhenyu Lee. 他没有使用find 或 xargs,他很有创意的利用了rsync的强大功能,使用rsync –delete将目标文件夹以一个空文件夹来替换.之后,我做了一个实验来比较各种方法.让我吃惊的是,Lee的方法要比其它的快的多.下面就是我的测评. 环境: CPU: Intel(R

代码如下: #!/bin/bash #check MySQL_Slave Status #crontab time 00:10 MYSQLPORT=`netstat -na|grep "LISTEN"|grep "3306"|awk -F[:" "]+ '{print $4}'` MYSQLIP=`ifconfig eth0|grep "inet addr" | awk -F[:" "]+ '{print