sersync会对目录进行监控,将变化的目录或文件同步到远程服务器。sersync是递归监控的,如果有多级目录 ,都会同步到远程服务器。
sersync依赖于rsync进行同步,在同步主服务器上开启sersync,将监控路径中的文件同步到目标服务器,因此需要在主服务器配置sersync,在同步目标服务器上配置rsync。
 
1、在目标服务器上的配置
rsync配置:
  1. vim /etc/rsyncd.conf
  2. uid = root
  3. gid = root
  4. max connections = #最大连接数
  5. use chroot = yes
  6. log file = /var/log/rsyncd.log
  7. pid file = /var/run/rsyncd.pid
  8. lock file = /var/run/rsyncd.lock
  9. #motd file = /etc/rsyncd.Motd #rsync启动时欢迎信息页面文件位置(文件内容自定义)
  10.  
  11. [tongbu1]
  12. path=/opt/tongbu1
  13. comment = breeze video files
  14. ignore errors = yes`
  15. read only = no
  16. hosts allow = 192.168.0.100
  17. hosts deny = *
  18. auth users = rsyncadmin #用于rsync同步认证的用户,如果有多个,可用逗号隔开
  19. secrets file = /etc/rsync.pas # rsyncadmin密码认证文件,必须为600权限,否则rsync传输会报错

创建/etc/rsync.pas文件:

  1. echo "rsyncadmin:123456" > /etc/rsync.pas
上述配置,允许主服务器同步文件,且将同步过来的日志放入/opt/tongbu1目录中。
 
启动rsync守护进程:
  1. rsync --daemon

2、在主服务器上的配置

创建rsync密码认证文件:

  1. echo "" > /etc/rsync.pas

调整内核参数:

  1. sysctl -w fs.inotify.max_queued_events="" #inotify队列最大长度,如果值太小,会出现"** Event Queue Overflow **"错误,导致监控文件不准确
  2. sysctl -w fs.inotify.max_user_watches="" #要同步的文件包含多少目录,可以用find /opt/tongbu1 -type d | wc -l 统计,必须保证max_user_watches值大于统计结果
  3. sysctl -w fs.inotify.max_user_instances="" #每个用户创建inotify实例最大值

sersync安装:

  1. wget http://sersync.googlecode.com/files/sersync2.5.4_64bit_binary_stable_final.tar.gz
  2. tar xf sersync2..4_64bit_binary_stable_final.tar.gz
  3. cp GNU-linux-x86 /usr/local/sersync
  4. cd /usr/local/sersync
  5. mkdir conf bin log
  6. mv confxml.xml conf/
  7. mv sersync2 bin/

sersync配置文件:

  1. vim /usr/local/sersync/conf/confxml.xml
  2.  
  3. <?xml version="1.0" encoding="ISO-8859-1"?>
  4. <head version="2.5">
  5. # 设置本地IP和端口
  6. <host hostip="localhost" port=""></host>
  7. # 开启DUBUG模式
  8. #注:设置为true,开启debug模式,会在sersync正在运行的控制台,打印inotify事件与rsync同步命令。
  9. <debug start="false"/>
  10. # 开启xfs文件系统
  11. #注:对于xfs文件系统的用户,需要将这个选项开启,才能使sersync正常工作
  12. <fileSystem xfs="false"/>
  13. # 同步时忽略推送的文件(正则表达式),默认关闭
  14. #注:该配置在测试时似乎有bug,本人在测试过滤时,同步/var/www/html,但忽略/var/www/html/cache/,默认确实可以忽略下直属/var/www/html/cache下的文件或目录,但假使/var/www/html/cache下还有个目录叫test,即/var/www/html/cache/test目录,这个时候如果在sersync端更新了/var/www/html/cache/test目录中的文件,则依然会被同步,简单来说,就是无法实现递归过滤。这显然不是我们想要的结果。所以在生产环境中,建议过滤还是通过rsync端的exclude来实现。
  15. <filter start="false">
  16. <exclude expression="(.*)\.svn"></exclude>
  17. <exclude expression="(.*)\.gz"></exclude>
  18. <exclude expression="^info/*"></exclude>
  19. <exclude expression="^static/*"></exclude>
  20. </filter>
  21. # 设置要监控的事件
  22. #注:对于大多数应用,可以尝试把createFile(监控文件事件选项)设置为false来提高性能,减少 rsync通讯。因为拷贝文件到监控目录会产生create事件与close_write事件,所以如果关闭create事件,只监控文件拷贝结束时的事 件close_write,同样可以实现文件完整同步。
  23. #如果将createFolder设为false,则不会对产生的目录进行监控,该目录下的子文件与子目录也不会被监控。
  24. #默认情况下对创建文件(目录)事件与删除文件(目录)事件都进行监控,如果项目中不需要删除远程目标服务器的文件(目录),则可以将delete 参数设置为false,则不对删除事件进行监控。
  25. <inotify>
  26. <delete start="true"/>
  27. <createFolder start="true"/>
  28. <createFile start="false"/>
  29. <closeWrite start="true"/>
  30. <moveFrom start="true"/>
  31. <moveTo start="true"/>
  32. <attrib start="true"/>
  33. <modify start="true"/>
  34. </inotify>
  35. <sersync>
  36. # 本地同步的目录路径
  37. <localpath watch="/data">
  38. # 远程IP和rsync模块名
  39. <remote ip="192.168.0.101" name="tongbu1"/>
  40. <remote ip="192.168.0.102" name="tongbu1"/>
  41. </localpath>
  42. <rsync>
  43. # rsync指令参数
  44. <commonParams params="-auvzP"/>
  45. # rsync同步认证
  46. <auth start="true" users="sersync" passwordfile="/etc/rsync.pas"/>
  47. # 设置rsync远程服务端口,远程非默认端口则需打开自定义
  48. <userDefinedPort start="false" port=""/><!-- port= -->
  49. # 设置超时时间
  50. <timeout start="true" time=""/><!-- timeout= -->
  51. # 设置rsync+ssh加密传输模式,默认关闭,开启需设置SSH加密证书
  52. <ssh start="false"/>
  53. </rsync>
  54. # sersync传输失败日志脚本路径,每隔60会重新执行该脚本,执行完毕会自动清空。
  55. <failLog path="/usr/local/sersync/log/rsync_fail_log.sh" timeToExecute=""/><!--default every 60mins execute once-->
  56. # 设置rsync+crontab定时传输,默认关闭
  57. 注:crontab可以对监控路径与远程目标主机每隔一段时间进行一次整体同步,可能由于一些原因两次失败重传都失败了,这个时候如果开启了crontab功能,还可以进一步保证各个服务器文件一致,如果文件量比较大,crontab的时间间隔要设的大一些,否则可能增加通讯开销。schedule这个参数是设置crontab的时间间隔,默认是600分钟
  58. 如果开启了filter文件过滤功能,那么crontab整体同步也需要设置过滤,否则虽然实时同步的时候文件被过滤了,但crontab整体同步的时候如果不单独设置crontabfilter,还会将需过滤的文件同步到远程,crontab的过滤正则与filter过滤的不同,也给出了两个实例分别对应与过滤文件与目录。总之如果同时开启了filtercrontab,则要开启crontabcrontabfilter,并按示例设置使其与filter的过滤一一对应。
  59. <crontab start="false" schedule=""><!--600mins-->
  60. <crontabfilter start="false">
  61. <exclude expression="*.php"></exclude>
  62. <exclude expression="info/*"></exclude>
  63. </crontabfilter>
  64. </crontab>
  65. # 设置sersync传输后调用name指定的插件脚本,默认关闭
  66. <plugin start="false" name="command"/>
  67. </sersync>
  68. # 插件脚本范例
  69. <plugin name="command">
  70. <param prefix="/bin/sh" suffix="" ignoreError="true"/> <!--prefix /opt/tongbu/mmm.sh suffix-->
  71. <filter start="false">
  72. <include expression="(.*)\.php"/>
  73. <include expression="(.*)\.sh"/>
  74. </filter>
  75. </plugin>
  76. # 插件脚本范例
  77. <plugin name="socket">
  78. <localpath watch="/opt/tongbu">
  79. <deshost ip="192.168.138.20" port=""/>
  80. </localpath>
  81. </plugin>
  82. <plugin name="refreshCDN">
  83. <localpath watch="/data0/htdocs/cms.xoyo.com/site/">
  84. <cdninfo domainname="ccms.chinacache.com" port="" username="xxxx" passwd="xxxx"/>
  85. <sendurl base="http://pic.xoyo.com/cms"/>
  86. <regexurl regex="false" match="cms.xoyo.com/site([/a-zA-Z0-9]*).xoyo.com/images"/>
  87. </localpath>
  88. </plugin>
  89. </head>

3、sersync启动参数

1)在主服务器开启sersync守护进程,使sersync在后台运行,开启实时同步
  1. ./sersync -d

2)在开启实时监控之前对主服务器目录与远程目标机目录进行一次整体同步

  1. ./sersync -r

如果设置了过滤器,即在xml文件中,filter为true,则暂时不能使用-r参数进行整体同步。-r参数将会无效。

3)指定配置文件

  1. ./sersync -o XXX.xml

对于sersync使用可执行文件目录下的默认配置文件confxml.xml,如果需要使用另一个配置文件,可以使用-o参数指定其它配置文件。也可开启多个sersync守护进程分别使用不同的配置文件。

4)指定默认的线程池的线程总数

  1. ./sersync -n num

例如, ./sersync -n 5则指定线程总数为5,如果不指定,默认启动线程池数量是10,如果cpu使用过高,可以通过这个参数调低,反之亦然。

5)不进行同步,只运行插件

  1. ./sersync -m pluginName

例如,./sersync -m command ,则在监控到文件事件后,不对远程目标服务器进行同步,而是直接运行command插件。

Sersync实时同步的更多相关文章

  1. sersync 实时同步工具

    出处:http://code.google.com/p/sersync/ 当前版本的sersync依赖于rsync进行同步.如下图所示,在同步主服务器上开启sersync,将监控路径中的文件同步到目标 ...

  2. Sersync实时同步企业应用配置实战

    一.实验环境 CentOS版本: 6.6(2.6.32.-504.el6.x86_64) Rsync版本:  Rsync-3.0.6(系统自带) Sersync版本:sersync2.5.4_64bi ...

  3. Rsync + sersync 实时同步备份

    一      Rsync + Sersync  实时同步介绍 1.Rsync 服务搭建介绍 云机上搭建Rsync server,在本地搭建Rsync Clinet. 2. Sersync 服务搭建介绍 ...

  4. sersync 实时同步

    1.什么是实时同步 ​ 监控一个目录的变化, 当该目录触发事件(创建\删除\修改) 就执行动作, 这个动作可以是 rsync同步 ,也可以是其他. 2.为什么要实时同步 1.能解决nfs单点故障问题. ...

  5. 5. Sersync实时同步

    rsync+Sersync数据的实时同步 sersync介绍 1.什么是实时同步 监控一个目录的变化, 当该目录触发事件(创建\删除\修改) 就执行动作, 这个动作可以是 rsync同步 ,也可以是其 ...

  6. 搭建WEB、NFS共享、sersync实时同步以及全网定时备份服务流程

    本次实验的主要目的: 1.搭建web服务,使用nfs服务共享的/data目录挂载到web站点目录上. 2.nfs服务器与backup服务器使用sersync实时同步/data目录中的文件. 3.bac ...

  7. day04 sersync实时同步和ssh服务

    day04 sersync实时同步和ssh服务 sersync实时同步 1.什么是实时同步 实时同步是一种只要当前目录发生变化则会触发一个事件,事件触发后会将变化的目录同步至远程服务器. 2.为什么使 ...

  8. sersync 实时同步文件

    sersync 主要用于服务器同步,web镜像等功能.sersync是使用c++编写,在结合rsync同步的时候,节省了运行时耗和网络资源.因此更快.sersync配置起来很简单.另外本项目相比较其他 ...

  9. sersync实时同步实战

    第1章 实时同步 1.1 什么是实时同步 实时同步是一种只要当前目录触发事件,就马上同步到远程的目录.rsync 1.2 为什么要实时同步web->nfs->backup 保证数据的连续性 ...

随机推荐

  1. Coding 代码管理快速入门

    当项目创建好了之后,我们该如何上传代码到 coding 上呢?Coding 网站使用“ Git 仓库”(类似 github )来管理代码.其操作原理在于:利用 git 服务,将本地的项目目录下的文件同 ...

  2. The MySQL server is running with the --skip-grant-tables option so it cannot execute this statement

    skip-grant-tables下 GRANT ALL PRIVILEGES ON *.* TO helei IDENTIFIED BY 'MANAGER' WITH GRANT OPTION; 执 ...

  3. C#综合揭秘——细说进程、应用程序域与上下文之间的关系

    引言 本文主要是介绍进程(Process).应用程序域(AppDomain)..NET上下文(Context)的概念与操作.虽然在一般的开发当中这三者并不常用,但熟悉三者的关系,深入了解其作用,对提高 ...

  4. jQuery如何实现点击页面获得当前点击元素

    获得jquery对象: function foo(e){ var obj = $(e.target); }

  5. Android笔记:Fragment与ViewPager组合时,如何在FragmentActicity获取Fragment对象

    项目中有一处需要监听宿主的控件,再去更新Fragment页面,由此必须去获取Fragment里的对象; 在FragmentActivity + Fragment组合里是可以使用以下方案: MedicF ...

  6. android: activity之间切换的抽屉效果

    之前一直用的是向左平移和向右平移的切换动画,看到别的APP那个抽屉效果,自己也弄了一个!感谢给我提供帮助的大神们! 将退出动画的参数设置为0时,进入动画则设置为向左平移,就实现了抽屉效果! 进入的动画 ...

  7. 简单的Elf逆向Writeup

    ElfCrackMe1 html,body,div,span,applet,object,iframe,h1,h2,h3,h4,h5,h6,p,blockquote,pre,a,abbr,acrony ...

  8. $.each()遍历json数据

    var json = [ {"id":"1","tagName":"apple"}, {"id":& ...

  9. 数组&&函数数组

    数组:一次性定义多个同类型的变量,数组在 内存中存储空间必须是连续的(查询比较快)定义数组: int a[]; int[] a;分配空间: a=new int[5]; 自动为数组元素赋以默认值 a[0 ...

  10. 配置IIS Express以便通过IP地址访问调试的网站

    问题背景 最近使用C#编写了一个WebService,希望通过Java进行调用.使用Visual Studio 2013调试WebService时,可以在浏览器中通过localhost地址访问WSDL ...