rsync实现服务器的文件同步


参考文献链接:

一、rsync实现负载均衡集群文件同步,搭建线上测试部署环境

二、rsync

三、rsync常见错误

四、rsync 安装使用详解


环境部署:

  服务器1:192.168.1.169,作为客户端

  服务器2:192.168.1.167,作为服务端

  实现功能:每当169服务器中的文件发生改变时,就同步到167服务器中。


服务端配置(即167服务器的配置):

(1)软件安装
yum install rsync xinetd
(2)为 rsyncd 服务编辑配置文件,默认没有,需自己编辑
vim /etc/rsyncd.conf
写入以下内容:
uid = root
gid = root
use chroot = no
max connections = 5
timeout = 600
pid file = /var/run/rsyncd.pid
lockfile = /var/run/rsyncd.lock
log file = /var/log/rsyncd.log
[web1]
path = /usr/local/nginx/html/hello/
ignore errors = yes
read only = no
write only = no
hosts allow = 192.168.1.169
hosts deny = *
list = yes
auth users = web
secrets file = /etc/web.passwd
(3)创建文件同步的目录,上面配置里的path,如果有就不用创建了
mkdir /usr/local/nginx/html/hello/
(4)创建配置中的密码文件,并增加权限:
echo "web:123" > /etc/web.passwd
chmod 600 /etc/web.passwd
(5)重新启动
service xinetd restart


客户端配置(即169服务器的配置):

(1)安装软件
yum -y install rsync
(2)创建web目录
mkdir /usr/local/nginx/html/hello/
(3)设置密码并设置权限
echo "123"> /tmp/rsync.password
chmod 600 /tmp/rsync.password

(4)关闭防火墙:service iptables stop。


在客户端测试(即169服务器):
rsync -avzP --delete --password-file=/tmp/rsync.password /usr/local/nginx/html/hello/ web@192.168.1.167::web1

如果看到文件同步过去表示成功。


数据实时同步:
  环境:Rsync + Inotify-tools。

  下载安装

  wget https://jaist.dl.sourceforge.net/project/inotify-tools/inotify-tools/3.13/inotify-tools-3.13.tar.gz
  tar -zxvf inotify-tools-3.13.tar.gz
  mkdir /usr/local/inotify
  cd inotify-tools-3.13
  ./configure --prefix=/usr/local/inotify/
  make && make install

设置环境变量

  vim /etc/profile
  在末尾增加一行:
  export PATH=$PATH:/usr/local/inotify/bin
  使配置生效:
  source /etc/profile

echo '/usr/local/inotify/lib' >> /etc/ld.so.conf --加载库文件
ldconfig
ln -s /usr/local/inotify/include /usr/include/inotify


测试脚本:

创建shell文件:
vim /test.sh
输入以下内容:

#!/bin/bash

src=/usr/local/nginx/html/hello/
user=web
host1=192.168.1.167
dst1=web1
passpath=/tmp/rsync.password /usr/local/inotify/bin/inotifywait \
-mrq --timefmt '%d/%m/%y' \
--format '%T %w%f%e' \
-e modify,delete,create,attrib \
/usr/local/nginx/html/hello/ | while read files
do
rsync -vzrtopg --delete --progress --passfile=$passfile-path $src $user@$host1::$dst1
echo "${files} was rsyncd" >>/tmp/rsync.log >&
done

设置自动运行:

chmod 755 /data/test/test.sh
/data/test/test.sh &
echo '/data/test/test.sh &' >> /etc/rc.local --设置开机自启


扩展知识:

  查看已安装的软件包
    yum list rsync
  卸载rsync
    yum remove rsync

  常见错误:    

    问题一:
      rsync: failed to set times on “directory” Operation not permitted (1)
      解决:
        请检查/etc/rsyncd.conf这个配置文件是否正确。

    问题二:

      @ERROR: auth failed on module web
      rsync error: error starting client-server protocol (code 5) at main.c(1657) [Receiver=3.1.3]
      原因:
        服务器端该模块(web)需要验证用户名密码,但客户端没有提供正确的用户名密码,认证失败。
        提供正确的用户名密码解决此问题。

    问题三:

      inotifywait: error while loading shared libraries: libinotifytools.so.0: cannot open shared object

      [root@db zzh]# ll /proc/sys/fs/inotify (如果有下列三项则支持inotifytools)
      total 0
      -rw-r--r-- 1 root root 0 Sep 20 16:52 max_queued_events
      -rw-r--r-- 1 root root 0 Sep 20 16:52 max_user_instances
      -rw-r--r-- 1 root root 0 Sep 20 16:52 max_user_watches

      解决:
      [root@db zzh]# ln -s /usr/local/lib/libinotifytools.so.0 /usr/lib64/libinotifytools.so.0

    问题四:

      wile read 命令未找到

      解决:

        检出sh文件,或重新编写。

rsync配置文件说明:

uid = root #--rsync运行权限为root
gid = root #--rsync运行权限为root
use chroot = no #--是否让进程离开工作目录
max connections = 5 #--最大并发连接数,0为不限制
timeout = 600 #--超时时间
pid file = /var/run/rsyncd.pid #--指定rsync的pid存放路径
lockfile = /var/run/rsyncd.lock #--指定rsync的锁文件存放路径
log file = /var/log/rsyncd.log #--指定rsync的日志存放路径
[web1] #--模块名称
path = /data/test/src #--该模块存放文件的基础路径
ignore errors = yes #--忽略一些无关的I/O错误
read only = no #--客户端可以上传
write only = no #--客户端可以下载
hosts allow = 192.168.8.167 #--允许连接的客户端主机ip
hosts deny = * #--黑名单,*表示任何主机
list = yes
auth users = web #--认证此模块的用户名
secrets file = /etc/web.passwd #--指定存放“用户名:密码”格式的文件


Linux 之 rsync实现服务器的文件同步的更多相关文章

  1. 使用inotify+rsync实现服务器间文件同步

      1. rsync 1.1 什么是rsync   rsync是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件.它使用所谓的“Rsync演算法”来使本地和远程两个主机之间的文件达到 ...

  2. rsync+sersync+inotify实现服务器间文件同步之一

    rsync+sersync+inotify实现服务器间文件同步之一:rsync安装配置 2013年12月14日 ⁄ Linux管理, 服务器集群技术 ⁄ 共 4925字 ⁄ rsync+sersync ...

  3. Linux下Rsync+sersync实现数据实时同步

    inotify 的同步备份机制有着缺点,于是看了sersync同步,弥补了rsync的缺点.以下转自:http://www.osyunwei.com/archives/7447.html 前言: 一. ...

  4. Linux下Rsync+Inotify-tools实现数据实时同步

    Linux下Rsync+Inotify-tools实现数据实时同步 注意:下面的三个案例都是rsync 每次都是全量的同步(这就坑爹了),而且 file列表是循环形式触发rsync ,等于有10个文件 ...

  5. linux使用rsync+inotify-tools+ssh实现文件实时同步

    假设某服务器架构中有两台web服务器(IP为192.168.1.252和192.168.1.254),一台代码更新发布服务器(IP为192.168.1.251),需要同步的目录是/data/www/, ...

  6. Sersync+Rsync实现触发式文件同步

    背景 通常我们在服务器上使用rsync加上crontab来定时地完成一些同步.备份文件的任务.随着业务和应用需求的不断扩大.实时性要求越来越高.一般rsync是通过校验所有文件后,进行差量同步,如果文 ...

  7. cwRsync window下的跨服务器的文件同步

    cwRsync 是window下的文件同步软件,可以跨服务器运行,第一次运行的时候是全部备份同步,之后的同步采用的是增量同步 这个软件分为服务端和客户端. 服务器是需要同步的文件源, 客户端相当于是备 ...

  8. Linux使用rsync客户端与服务端同步目录进行备份

    一.服务端设置 1. 修改 server 端配置 # vi /etc/rsyncd.conf 修改: uid = nobody # 该选项指定当该模块传输文件时守护进程应该具有的uid.默认值为&qu ...

  9. [sersync+rsync] centos6.5 远程文件同步部署记录

    针对本地文件的修改,自动同步到远程文件夹,远程备份很方面.研究了下大家的主流同步方案一般是 rsync+inotify和rsync+sersync, 我这里使用sersync的方案,当然大部分都是参照 ...

随机推荐

  1. Win10家庭版找不到组策略gpedit.msc

    首先在桌面上建立一个txt文本文件,将下面的代码复制到里面 @echo off pushd "%~dp0" dir /b C:\Windows\servicing\Packages ...

  2. ACM 广度优化搜索算法总结

    广度优化搜索算法的本质:要求每个状态不能重复,这就需要我们:第一次先走一步可以到达的状态,如果还没有找到答案,就需要我们走到两步可以到达的状态.依次下去 核心算法:队列 基本步骤:          ...

  3. bash的位置变量和特殊变量

    bash编程的知识点:位置变量和特殊变量 位置参数变量:         scirpt1.sh arg1 arg2 ...         $0         $1   $2   ...  ${10 ...

  4. Java构造器(construtor)与垃圾收集器(GB)

    在Java中,程序员会在乎内存中的两块空间. 堆(heap)和栈(stack). 当java虚拟机启动时, 它会从底层的操作系统取得一块内存, 并且以此块内存来执行java程序. 在Java中, 实例 ...

  5. HDU 4871 Shortest-path tree 最短路 + 树分治

    题意: 输入一个带权的无向连通图 定义以顶点\(u\)为根的最短路生成树为: 树上任何点\(v\)到\(u\)的距离都是原图最短的,如果有多条最短路,取字典序最小的那条. 然后询问生成树上恰好包含\( ...

  6. LA 5007 Detector Placement 模拟

    题意: 给出一束光线(射线),和一块三角形的棱镜 以及 棱镜的折射率,问光线能否射到X轴上,射到X轴上的坐标是多少. 分析: 其实直接模拟就好了,注意到题目中说不会发生全反射,所以如果射到棱镜中的话就 ...

  7. Netcore 基础之TagHelper知识

    饮水思源,来自:http://www.cnblogs.com/liontone 的BLOG中关于taghelper中的内容 概要 TagHelper是ASP.NET 5的一个新特性.也许在你还没有听说 ...

  8. Jmeter Cluster

    Jmeter 是开源软件,100%纯java应用程序,专门为负载测试和性能测试. Jmeter的特性包括: 1.负载测试和性能测试许多不同的服务器/协议类型: Web - HTTP, HTTPS SO ...

  9. 让boostrap的图片轮播支持滑动效果

    因为最近开发的项目涉及到移动设备上的 HTML5 开发,其中需要实现轮播效果. 然后最快捷的方式,你知道的(Bootstrap),然后原生的 Bootstrap 的 carousel.js 插件并没有 ...

  10. SQL中,WHERE HAVING的区别

    WHERE是约束声明,是用来约束选数据库中储存的值的,其是在查询返回结果集之前起作用,其必须作用于数据库中存在的值,因此不能用聚合函数(avg,sum,count等,因为这些函数返回的值并非数据库中储 ...