一、inotify简介

　　inotify是Linux内核的一个功能，它能监控文件系统的变化，比如删除、读、写和卸载等操作。它监控到这些事件的发生后会默认往标准输出打印事件信息。要使用inotify，Linux内核版本必须是大于2.6.13，在这之前的内核都没有这个功能。我们可以利用inotify去监控我们要监控的资源，当资源发生变化时，我们扑捉它的事件，从而触发同步数据等操作。

二、inotify软件介绍

　　inotify是内核的一个功能，众所周知内核的功能我们必须要配合工具才能使用，通常情况下用户要使用内核的功能，都需要用户空间的软件去调用才可以达到使用内核的功能的目的，用户是无法直接操内核的。实现inotify软件有inotify-tools、sersync、lrsyncd。我们这里以inotify-tools这个软件包为例进行实验；inotify-tools包主要有两个文件，一个是inotifywait： 在被监控的文件或目录上等待特定文件系统事件（open close delete等）发生，常用于实时同步的目录监控；一个是inotifywatch：收集被监控的文件系统使用的统计数据，指文件系统事件发生的次数统计。通常情况下我们使用iontifywait就可以了。接下来我们来安装inotify-tools

三、inotify软件安装和使用

　　首先我们要确认我们手上的Linux系统是否支持inotify这个功能

  1. [root@test ~]# uname -r
  2. 3.10.0-957.27.2.el7.x86_64
  3. [root@test ~]# ll /proc/sys/fs/inotify/
  4. 总用量 0
  5. -rw-r--r-- 1 root root 0 1月  31 16:29 max_queued_events
  6. -rw-r--r-- 1 root root 0 1月  31 16:29 max_user_instances
  7. -rw-r--r-- 1 root root 0 1月  31 16:29 max_user_watches
  8. [root@test ~]#

　　提示：如果我们的内核版本高于2.6.13，并且有/proc/sys/fs/inotify/目录，说明我们的系统上支持inotify功能的

　　inotify内核参数说明

　　我们在/proc/sys/fs/inotify这个目录下看到有三个文件，这三个文件就是记录inotify的内核参数的文件。其中max_queued_events这个文件记录inotify事件队列最大长度，如值太小会报Event Queue Overflow 错误，默认值：16384，当然这个值是可以更改的，临时更改可以用echo 命令加上值给重定向到这个文件中。永久修改需要修改编辑/etc/sysctl.conf

  1. [root@test ~]# cat /proc/sys/fs/inotify/max_queued_events
  2. 16384
  3. [root@test ~]# echo 'fs.inotify.max_queued_events=999999' >> /etc/sysctl.conf
  4. [root@test ~]# cat /etc/sysctl.conf
  5. # sysctl settings are defined through files in
  6. # /usr/lib/sysctl.d/, /run/sysctl.d/, and /etc/sysctl.d/.
  7. #
  8. # Vendors settings live in /usr/lib/sysctl.d/.
  9. # To override a whole file, create a new file with the same in
  10. # /etc/sysctl.d/ and put new settings there. To override
  11. # only specific settings, add a file with a lexically later
  12. # name in /etc/sysctl.d/ and put new settings there.
  13. #
  14. # For more information, see sysctl.conf(5) and sysctl.d(5).
  15. fs.inotify.max_queued_events=999999
  16. [root@test ~]# sysctl -p
  17. fs.inotify.max_queued_events = 999999
  18. [root@test ~]# cat /proc/sys/fs/inotify/max_queued_events
  19. 999999
  20. [root@test ~]#

　　提示：修改内核其他参数，也是是类似的方法。

　　max_user_watches：这个文件主要存放单个进程监控文件的数量，默认是8129；生产环境中如果监控的文件数量庞大，可以通过上面的方式去修改这个值

　　max_user_instances:这个文件存放用户创建inotify实例的最大值，默认是128；同样也是可以通过上面的方式修改

　　inotify软件安装

　　参考文档https://github.com/rvoicilas/inotify-tools/wiki

　　inotify是基于epel源，在用yum安装前请先配好yum源

  1. [root@test ~]# yum info inotify-tools
  2. 已加载插件：fastestmirror
  3. Loading mirror speeds from cached hostfile
  4.  * base: mirrors.aliyun.com
  5.  * extras: mirrors.aliyun.com
  6.  * updates: mirrors.aliyun.com
  7. 可安装的软件包
  8. 名称    ：inotify-tools
  9. 架构    ：x86_64
  10. 版本    ：3.14
  11. 发布    ：9.el7
  12. 大小    ：51 k
  13. 源    ：epel/x86_64
  14. 简介    ： Command line utilities for inotify
  15. 网址    ：http://inotify-tools.sourceforge.net/
  16. 协议    ： GPLv2
  17. 描述    ： inotify-tools is a set of command-line programs for Linux providing
  18.          : a simple interface to inotify. These programs can be used to monitor
  19.          : and act upon filesystem events.
  20.  
  21. [root@test ~]#

　　提示：如果用yum可以看到inotify-tools的说明信息，说明你的Linux yum仓库里有这个软件包，可以直接yum 安装即可

  1. [root@test ~]# yum install -y inotify-tools
  2. 已加载插件：fastestmirror
  3. Loading mirror speeds from cached hostfile
  4.  * base: mirrors.aliyun.com
  5.  * extras: mirrors.aliyun.com
  6.  * updates: mirrors.aliyun.com
  7. base                                                                                                      | 3.6 kB  00:00:00
  8. dockerrepo                                                                                                | 2.9 kB  00:00:00
  9. epel                                                                                                      | 5.3 kB  00:00:00
  10. extras                                                                                                    | 2.9 kB  00:00:00
  11. updates                                                                                                   | 2.9 kB  00:00:00
  12. updates/7/x86_64/primary_db                                                                               | 5.9 MB  00:00:01
  13. 正在解决依赖关系
  14. --> 正在检查事务
  15. ---> 软件包 inotify-tools.x86_64.0.3.14-9.el7 将被 安装
  16. --> 解决依赖关系完成
  17.  
  18. 依赖关系解决
  19.  
  20. =================================================================================================================================
  21.  Package                            架构                        版本                             源                         大小
  22. =================================================================================================================================
  23. 正在安装:
  24.  inotify-tools                      x86_64                      3.14-9.el7                       epel                       51 k
  25.  
  26. 事务概要
  27. =================================================================================================================================
  28. 安装  1 软件包
  29.  
  30. 总下载量：51 k
  31. 安装大小：111 k
  32. Downloading packages:
  33. inotify-tools-3.14-9.el7.x86_64.rpm                                                                       |  51 kB  00:00:00
  34. Running transaction check
  35. Running transaction test
  36. Transaction test succeeded
  37. Running transaction
  38.   正在安装    : inotify-tools-3.14-9.el7.x86_64                                                                              1/1
  39.   验证中      : inotify-tools-3.14-9.el7.x86_64                                                                              1/1 
  40.  
  41. 已安装:
  42.   inotify-tools.x86_64 0:3.14-9.el7                                                                                              
  43.  
  44. 完毕！
  45. [root@test ~]#

　　提示：我们安装好软件包要习惯的去看这个软件包装了那些东西，它的配置文件大概放在哪个位置等信息

  1. [root@test ~]# rpm -ql inotify-tools
  2. /usr/bin/inotifywait
  3. /usr/bin/inotifywatch
  4. /usr/lib64/libinotifytools.so.0
  5. /usr/lib64/libinotifytools.so.0.4.1
  6. /usr/share/doc/inotify-tools-3.14
  7. /usr/share/doc/inotify-tools-3.14/AUTHORS
  8. /usr/share/doc/inotify-tools-3.14/COPYING
  9. /usr/share/doc/inotify-tools-3.14/ChangeLog
  10. /usr/share/doc/inotify-tools-3.14/NEWS
  11. /usr/share/doc/inotify-tools-3.14/README
  12. /usr/share/man/man1/inotifywait.1.gz
  13. /usr/share/man/man1/inotifywatch.1.gz
  14. [root@test ~]#

　　提示：从上面查询的信息我们可以清楚的知道，inotify-tools这两个包主要安装了两个程序，一个是/usr/bin/inotifywait，一个是/usr/bin/inotifywatch，其他都是它的帮助文档；在上面的介绍了这两个程序的作用；安装好了inotify工具后，我们再来看看inotifywait这个工具的用法和选项

　　inotifywait命令常见选项说明

  1. [root@test ~]# inotifywait --help
  2. inotifywait 3.14
  3. Wait for a particular event on a file or set of files.
  4. Usage: inotifywait [ options ] file1 [ file2 ] [ file3 ] [ ... ]
  5. Options:
  6.         -h|--help       Show this help text.
  7.         @<file>         Exclude the specified file from being watched.
  8.         --exclude <pattern>
  9.                         Exclude all events on files matching the
  10.                         extended regular expression <pattern>.
  11.         --excludei <pattern>
  12.                         Like --exclude but case insensitive.
  13.         -m|--monitor    Keep listening for events forever.  Without
  14.                         this option, inotifywait will exit after one
  15.                         event is received.
  16.         -d|--daemon     Same as --monitor, except run in the background
  17.                         logging events to a file specified by --outfile.
  18.                         Implies --syslog.
  19.         -r|--recursive  Watch directories recursively.
  20.         --fromfile <file>
  21.                         Read files to watch from <file> or `-' for stdin.
  22.         -o|--outfile <file>
  23.                         Print events to <file> rather than stdout.
  24.         -s|--syslog     Send errors to syslog rather than stderr.
  25.         -q|--quiet      Print less (only print events).
  26.         -qq             Print nothing (not even events).
  27.         --format <fmt>  Print using a specified printf-like format
  28.                         string; read the man page for more details.
  29.         --timefmt <fmt> strftime-compatible format string for use with
  30.                         %T in --format string.
  31.         -c|--csv        Print events in CSV format.
  32.         -t|--timeout <seconds>
  33.                         When listening for a single event, time out after
  34.                         waiting for an event for <seconds> seconds.
  35.                         If <seconds> is 0, inotifywait will never time out.
  36.         -e|--event <event1> [ -e|--event <event2> ... ]
  37.                 Listen for specific event(s).  If omitted, all events are
  38.                 listened for.
  39.  
  40. Exit status:
  41.         0  -  An event you asked to watch for was received.
  42.         1  -  An event you did not ask to watch for was received
  43.               (usually delete_self or unmount), or some error occurred.
  44.         2  -  The --timeout option was given and no events occurred
  45.               in the specified interval of time.
  46.  
  47. Events:
  48.         access          file or directory contents were read
  49.         modify          file or directory contents were written
  50.         attrib          file or directory attributes changed
  51.         close_write     file or directory closed, after being opened in
  52.                         writeable mode
  53.         close_nowrite   file or directory closed, after being opened in
  54.                         read-only mode
  55.         close           file or directory closed, regardless of read/write mode
  56.         open            file or directory opened
  57.         moved_to        file or directory moved to watched directory
  58.         moved_from      file or directory moved from watched directory
  59.         move            file or directory moved to or from watched directory
  60.         create          file or directory created within watched directory
  61.         delete          file or directory deleted within watched directory
  62.         delete_self     file or directory was deleted
  63.         unmount         file system containing file or directory unmounted
  64. [root@test ~]#

　　提示：-m，--monitor表示始终保持事件监听，如果不加这个选项，默认它只是监控一次，也就是说只要我们监控的目录里的资源发生一次变化后，它就退出监控了；通常情况我们是结合-m选项持续的监控一个目录下的资源变化情况；-d表示以守护进程方式执行，和-m相似，配合-o使用。-d选项我们可以理解为后台守护进程的方式监控我们的资源，后台守护进程的方式执行我们是看不到说监控的资源变化情况，我们可以结合-o来指定一个文件，把资源变化情况类似写日志的方式给记录下来； -r, --recursive表示递归监控目录数据信息变化；-q,--quiet表示输出少量事件信息；--timefmt <fmt>表示指定输出事件的时间格式；--format <fmt> 表示指定的输出格式；即实际监控输出内容； -e 表示指定监听指定的事件，如果省略，表示所有事件都进行监听；--exclude <pattern>表示指定排除文件或目录，使用扩展的正则表达式匹配的模式实现；--excludei <pattern> 和exclude相似，不区分大小写； -o, --outfile <file>打印事件到文件中，相当于标准正确输出；-s, --syslogOutput 发送错误到syslog相当于标准错误输出

　　--timefmt <fmt>时间格式

　　　　%Y：表示年份信息，包含世纪信息

　　　　%y：表示年份信息，不包含世纪信息

　　　　%m：表示月份，范围01-12

　　　　%d：表示每月的第几天，范围01-31

　　　　%H：表示小时信息，使用24小时制度，范围00-24

　　　　%M：表示分钟，范围00-59

　　--format<fmt>输出信息格式定义

　　　　%T：输出时间格式中定义的时间格式，这个表示调用我们前面定义时间格式，通常情况--timefmt选项和--format结合使用

　　　　%w：表示事件出现时，监控文件或目录的名称信息。也就是监控资源名称信息

　　　　%f：时间出现时，显示监控目录下触发事件的文件或目录信息

　　　　%e：显示发生的事件信息，不同事件默认用逗号分隔

　　　　%Xe：显示发生的事件，不同的时间指定用"X"分割

  1. [root@test ~]# inotifywait -m --timefmt "%Y-%m-%d %H:%M" --format "%T %w event:%;e" /root/dir2
  2. Setting up watches.
  3. Watches established.
  4. 2020-01-31 18:07 /root/dir2/ event:OPEN;ISDIR
  5. 2020-01-31 18:07 /root/dir2/ event:CLOSE_NOWRITE;CLOSE;ISDIR
  6. 2020-01-31 18:07 /root/dir2/ event:OPEN;ISDIR
  7. 2020-01-31 18:07 /root/dir2/ event:CLOSE_NOWRITE;CLOSE;ISDIR
  8. 2020-01-31 18:07 /root/dir2/ event:OPEN;ISDIR
  9. 2020-01-31 18:07 /root/dir2/ event:CLOSE_NOWRITE;CLOSE;ISDIR
  10. 2020-01-31 18:07 /root/dir2/ event:OPEN;ISDIR
  11. 2020-01-31 18:07 /root/dir2/ event:CLOSE_NOWRITE;CLOSE;ISDIR

　　提示：指定信息不输出变化资源的文件名和目录，输出信息格式如上

  1. [root@test ~]# inotifywait -m --timefmt "%Y-%m-%d %H:%M" --format "%T %w%f event:%;e" /root/dir2
  2. Setting up watches.
  3. Watches established.
  4. 2020-01-31 18:09 /root/dir2/test event:OPEN;ISDIR
  5. 2020-01-31 18:09 /root/dir2/test event:CLOSE_NOWRITE;CLOSE;ISDIR
  6. 2020-01-31 18:09 /root/dir2/ event:OPEN;ISDIR
  7. 2020-01-31 18:09 /root/dir2/ event:CLOSE_NOWRITE;CLOSE;ISDIR
  8. 2020-01-31 18:09 /root/dir2/f1 event:CREATE
  9. 2020-01-31 18:09 /root/dir2/f1 event:OPEN
  10. 2020-01-31 18:09 /root/dir2/f1 event:ATTRIB
  11. 2020-01-31 18:09 /root/dir2/f1 event:CLOSE_WRITE;CLOSE
  12. 2020-01-31 18:09 /root/dir2/f1 event:MOVED_FROM
  13. 2020-01-31 18:09 /root/dir2/ff event:MOVED_TO

　　提示：指定信息输出变化资源的文件名和目录，输出信息格式如上

  1. [root@test ~]# inotifywait -m --timefmt "%Y-%m-%d %H:%M" --format "%T %w%f %e" /root/dir2
  2. Setting up watches.
  3. Watches established.
  4. 2020-01-31 18:10 /root/dir2/ OPEN,ISDIR
  5. 2020-01-31 18:10 /root/dir2/ CLOSE_NOWRITE,CLOSE,ISDIR
  6. 2020-01-31 18:10 /root/dir2/ OPEN,ISDIR
  7. 2020-01-31 18:10 /root/dir2/ CLOSE_NOWRITE,CLOSE,ISDIR
  8. 2020-01-31 18:10 /root/dir2/ OPEN,ISDIR
  9. 2020-01-31 18:10 /root/dir2/ CLOSE_NOWRITE,CLOSE,ISDIR
  10. 2020-01-31 18:10 /root/dir2/ OPEN,ISDIR
  11. 2020-01-31 18:10 /root/dir2/ CLOSE_NOWRITE,CLOSE,ISDIR
  12. 2020-01-31 18:10 /root/dir2/test OPEN,ISDIR
  13. 2020-01-31 18:10 /root/dir2/test CLOSE_NOWRITE,CLOSE,ISDIR

　　提示：不指定输出事件信息分割符，默认是逗号分隔

　　-e选项指定监控事件类型说明

　　　　create：表示文件或目录的创建

　　　　delete：表示文件或目录被删除

　　　　modify：表示文件或目录内容的修改

　　　　attrib：表示文件或目录的属性发生变化

　　　　close_write：表示文件或目录关闭，在写入模式打开之后关闭的

　　　　close_nowrite：表示文件或目录关闭，在只读模式打开之后关闭的

　　　　close：表示文件或目录关闭，不管是读还是写模式

　　　　open：文件或目录被打开

　　　　moved_to：表示文件被移动到监控目录中

　　　　moved_from：表示文件或目录从监控的目录中被移动

　　　　move：文件或目录不管移动到或移出监控目录都触发事件

　　　　access：表示文件或目录内容读取

　　　　delete_self：表示文件或目录被删除，目录本身被删除

　　　　unmount：表示取消挂载

　　提示：-e选项指定监控目录下文件或目录的事件，它只响应对应目录下的文件发生了指定事件后，才给予响应。以上表示只要/root/dir2目录下的文件或目录发生了create,delete,move这三种事件的任何一种，它都给予响应，我们查看/root/dir2下的文件它是不监控的，也不予响应。

　　了解了inotifywait命令的各种选项的使用后，我们就可以根据自己的实际需求来定义怎么监控我们的资源，当资源发生变化时，我们后续该怎么处理，这个不是inotify关心的事，它只负责告诉我们监控的资源发生了什么样的变化。如果我们想要备份变化后的资源，我们就需要用到别的服务，比如rsync;rsync这个软件是一个同步数据软件，它可以通过脚本和inotify结合实现，当资源文件发生变化时，触发rsync去同步数据，这样实现数据实时的同步。接下来我们在来搭建rsync服务

四、rsync服务安装配置

　　1、查看系统是否安装的有rsync，如果没有就安装

  1. [root@test ~]# rpm -qa rsync
  2. rsync-3.1.2-6.el7_6.1.x86_64
  3. [root@test ~]# yum info rsync
  4. 已加载插件：fastestmirror
  5. Loading mirror speeds from cached hostfile
  6.  * base: mirrors.aliyun.com
  7.  * extras: mirrors.aliyun.com
  8.  * updates: mirrors.aliyun.com
  9. 已安装的软件包
  10. 名称    ：rsync
  11. 架构    ：x86_64
  12. 版本    ：3.1.2
  13. 发布    ：6.el7_6.1
  14. 大小    ：815 k
  15. 源    ：installed
  16. 来自源：updates
  17. 简介    ： A program for synchronizing files over a network
  18. 网址    ：http://rsync.samba.org/
  19. 协议    ： GPLv3+
  20. 描述    ： Rsync uses a reliable algorithm to bring remote and host files into
  21.          : sync very quickly. Rsync is fast because it just sends the differences
  22.          : in the files over the network instead of sending the complete
  23.          : files. Rsync is often used as a very powerful mirroring process or
  24.          : just as a more capable replacement for the rcp command. A technical
  25.          : report which describes the rsync algorithm is included in this
  26.          : package.
  27.  
  28. [root@test ~]#

　　2、查看rsync配置文件路径

  1. [root@test ~]# rpm -ql rsync
  2. /etc/rsyncd.conf
  3. /etc/sysconfig/rsyncd
  4. /usr/bin/rsync
  5. /usr/lib/systemd/system/rsyncd.service
  6. /usr/lib/systemd/system/rsyncd.socket
  7. /usr/lib/systemd/system/rsyncd@.service
  8. /usr/share/doc/rsync-3.1.2
  9. /usr/share/doc/rsync-3.1.2/COPYING
  10. /usr/share/doc/rsync-3.1.2/NEWS
  11. /usr/share/doc/rsync-3.1.2/OLDNEWS
  12. /usr/share/doc/rsync-3.1.2/README
  13. /usr/share/doc/rsync-3.1.2/support
  14. /usr/share/doc/rsync-3.1.2/support/Makefile
  15. /usr/share/doc/rsync-3.1.2/support/atomic-rsync
  16. /usr/share/doc/rsync-3.1.2/support/cvs2includes
  17. /usr/share/doc/rsync-3.1.2/support/deny-rsync
  18. /usr/share/doc/rsync-3.1.2/support/file-attr-restore
  19. /usr/share/doc/rsync-3.1.2/support/files-to-excludes
  20. /usr/share/doc/rsync-3.1.2/support/git-set-file-times
  21. /usr/share/doc/rsync-3.1.2/support/instant-rsyncd
  22. /usr/share/doc/rsync-3.1.2/support/logfilter
  23. /usr/share/doc/rsync-3.1.2/support/lsh
  24. /usr/share/doc/rsync-3.1.2/support/lsh.sh
  25. /usr/share/doc/rsync-3.1.2/support/mapfrom
  26. /usr/share/doc/rsync-3.1.2/support/mapto
  27. /usr/share/doc/rsync-3.1.2/support/mnt-excl
  28. /usr/share/doc/rsync-3.1.2/support/munge-symlinks
  29. /usr/share/doc/rsync-3.1.2/support/rrsync
  30. /usr/share/doc/rsync-3.1.2/support/rsync-no-vanished
  31. /usr/share/doc/rsync-3.1.2/support/rsync-slash-strip
  32. /usr/share/doc/rsync-3.1.2/support/rsyncstats
  33. /usr/share/doc/rsync-3.1.2/support/savetransfer.c
  34. /usr/share/doc/rsync-3.1.2/tech_report.tex
  35. /usr/share/man/man1/rsync.1.gz
  36. /usr/share/man/man5/rsyncd.conf.5.gz
  37. [root@test ~]#

　　提示：可从上面的信息了解到rsync的配置文件是/etc/rsyncd.conf，二进制文件是/usr/bin/rsync

　　3、/etc/rsyncd.conf配置文件内容说明

  1. [root@test ~]# cat /etc/rsyncd.conf
  2. # /etc/rsyncd: configuration file for rsync daemon mode
  3.  
  4. # See rsyncd.conf man page for more options.
  5.  
  6. # configuration example:
  7.  
  8. # uid = nobody
  9. # gid = nobody
  10. # use chroot = yes
  11. # max connections = 4
  12. # pid file = /var/run/rsyncd.pid
  13. # exclude = lost+found/
  14. # transfer logging = yes
  15. # timeout = 900
  16. # ignore nonreadable = yes
  17. # dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2
  18.  
  19. # [ftp]
  20. #        path = /home/ftp
  21. #        comment = ftp export area
  22. [root@test ~]#

　　提示：我们打开rsync的配置文件，里面内容告诉我们，这个配置文件用于rsync工作为独立守护进程的服务配置，我们可以通过man rsyncd.conf来查看里面的选项说明

　　4、编辑/etc/rsyncd.conf

  1. [root@test ~]# cat /etc/rsyncd.conf
  2. # /etc/rsyncd: configuration file for rsync daemon mode
  3.  
  4. # See rsyncd.conf man page for more options.
  5.  
  6. # configuration example:
  7.  
  8. # uid = nobody
  9. # gid = nobody
  10. # use chroot = yes
  11. # max connections = 4
  12. # pid file = /var/run/rsyncd.pid
  13. # exclude = lost+found/
  14. # transfer logging = yes
  15. # timeout = 900
  16. # ignore nonreadable = yes
  17. # dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2
  18.  
  19. # [ftp]
  20. #        path = /home/ftp
  21. #        comment = ftp export area
  22. uid = root
  23. gid = root
  24. use chroot = no
  25. max connections = 0
  26. ignore errors
  27. exclude = lost+found/
  28. log file = /var/log/rsyncd.log
  29. pid file = /var/run/rsyncd.pid
  30. lock file = /var/run/rsyncd.lock
  31. reverse lookup = no
  32. hosts allow = 192.168.0.0/24
  33. [backup]
  34. path = /backup/
  35. comment = backup
  36. read only = no
  37. auth users = rsyncuser
  38. secrets file = /etc/rsync.pass
  39. [root@test ~]#

　　提示：uid，gid表示rsync这个服务是以那个用户的身份去运行；use chroot表示是否可切换指定path里的路径，如果是yes表示在传输文件之前首先 chroot 到 path 参数所指定的目录下。这样做的原因是实现额外的安全防护，但是缺点是需要 root并且不能备份指向 path 外部的符号连接所指向的目录文件；max connections表示指定最大并发连接数，0表示不限制；ignore errors表示忽略守护进程上的I/O错误；exclude表示排除监控的资源列表，也就是exclude后面的资源不监控；log file、pid file、lock file指定日志文件，pid文件，lock文件的路径；reverse lookup表示是否使用名称解析（控制守护进程是否对客户端IP地址执行反向查找以确定其主机名）；hosts allow表示指定允许的主机或网段内的主机来访问rsync服务器；[backup] 这个表示共享出来的目录共享名称，这个同samba的配置一样，这个名称只是对客户端看到共享出来的目录名称，它不是真的服务器路径名称；path表示指定真实存放同步数据的路径，也就是共享出去的名称对应到系统上的那个目录；comment表示描述说明；auth users表示那些用户可以访问这个目录；secrets file表示auth users的用户的密码信息文件

　　5、准备备份数据目录和创建secrets file所指定的用户密码文件，并把auth users所指定的用户和密码信息写入到该文件中

  1. [root@test ~]# mkdir /backup
  2. [root@test ~]# echo 'rsyncuser:admin' > /etc/rsync.pass
  3. [root@test ~]# cat /etc/rsync.pass
  4. rsyncuser:admin
  5. [root@test ~]# chmod 600 /etc/rsync.pass
  6. [root@test ~]# ll /etc/rsync.pass
  7. -rw------- 1 root root 16 1月  31 19:27 /etc/rsync.pass
  8. [root@test ~]#

　　提示：/etc/rsync.pass这个文件是secrets file指定的文件，它相当于一个虚拟的用户文件，不需要存在Linux系统中，这个文件主要保存用于同步数据时，所用到的用户；通常情况下为了rsync的用户信息安全，建议把这个文件的权限修改成600

　　6、启动rsync服务以Daemon方式运行，并检查端口运行情况

  1. [root@test ~]# ss -ntl
  2. State       Recv-Q Send-Q                   Local Address:Port                                  Peer Address:Port
  3. LISTEN      0      100                          127.0.0.1:25                                               *:*
  4. LISTEN      0      25                                   *:514                                              *:*
  5. LISTEN      0      128                                  *:41319                                            *:*
  6. LISTEN      0      50                                   *:3306                                             *:*
  7. LISTEN      0      128                                  *:111                                              *:*
  8. LISTEN      0      100                                ::1:25                                              :::*
  9. LISTEN      0      25                                  :::514                                             :::*
  10. LISTEN      0      128                                 :::41319                                           :::*
  11. LISTEN      0      128                                 :::111                                             :::*
  12. LISTEN      0      128                                 :::80                                              :::*
  13. [root@test ~]# rsync --daemon
  14. [root@test ~]# ss -ntl
  15. State       Recv-Q Send-Q                   Local Address:Port                                  Peer Address:Port
  16. LISTEN      0      100                          127.0.0.1:25                                               *:*
  17. LISTEN      0      25                                   *:514                                              *:*
  18. LISTEN      0      128                                  *:41319                                            *:*
  19. LISTEN      0      5                                    *:873                                              *:*
  20. LISTEN      0      50                                   *:3306                                             *:*
  21. LISTEN      0      128                                  *:111                                              *:*
  22. LISTEN      0      100                                ::1:25                                              :::*
  23. LISTEN      0      25                                  :::514                                             :::*
  24. LISTEN      0      128                                 :::41319                                           :::*
  25. LISTEN      0      5                                   :::873                                             :::*
  26. LISTEN      0      128                                 :::111                                             :::*
  27. LISTEN      0      128                                 :::80                                              :::*
  28. [root@test ~]#

　　提示：rsync默认端口是873  当然也可以通过在配置文件中用port 来指定

　　7、在客户端上创建密码文件

  1. [root@test-centos6-node1 ~]# echo "admin" >/etc/rsync.pass
  2. [root@test-centos6-node1 ~]# chmod 600 /etc/rsync.pass
  3. [root@test-centos6-node1 ~]# ll /etc/rsync.pass
  4. -rw------- 1 root root 6 Feb  1 03:38 /etc/rsync.pass
  5. [root@test-centos6-node1 ~]#

　　8、在客户端测试rsync是否可以把指定文件同步到rsync共享出来的backup下（这里的backup不是指服务器上的真实路径，是中括号里指定的名称，这个名称可以随便起，没有特殊要求）

  1. [root@test-centos6-node1 ~]# tree
  2. .
  3. └── test
  4.  
  5. 1 directory, 0 files
  6. [root@test-centos6-node1 ~]# echo "this is test file" >test/f1
  7. [root@test-centos6-node1 ~]# rsync -avz --password-file=/etc/rsync.pass /root/test/ rsyncuser@192.168.0.99::backup
  8. sending incremental file list
  9. ./
  10. f1
  11.  
  12. sent 93 bytes  received 30 bytes  246.00 bytes/sec
  13. total size is 18  speedup is 0.15
  14. [root@test-centos6-node1 ~]#

　　提示：可以看到在客户端已经把指定的资源给同步到rsync服务器上了，接下来我们看看rsync指定存放同步数据的目录是否有客户端同步过来的文件

  1. [root@test ~]# ll /backup
  2. 总用量 4
  3. -rw-r--r-- 1 root root 18 2月   1 2020 f1
  4. [root@test ~]# cat /backup/f1
  5. this is test file
  6. [root@test ~]#

　　提示：在服务端可以看到客户端同步过来的文件；到此rsync服务就搭建完毕了。接下来我们编写脚本结合inotify和rsync实现实时同步

五、在客户端编写脚本实现inotify+rsync实现实时同步

　　实验环境：centos6是客户端，在上面安装inotify-tools工具；centos7是rsync服务端；实验目的是实现实时监控centos6上的/root/test/目录下的所有资源，如果有变化就把文件通过rsync推送到rsync服务器上，实现实时同步

　　1、在centos6上安装inotify-tools

  1. [root@test-centos6-node1 ~]# yum install -y inotify-tools
  2. Loaded plugins: fastestmirror
  3. Setting up Install Process
  4. Loading mirror speeds from cached hostfile
  5.  * base: mirrors.cn99.com
  6.  * extras: mirrors.aliyun.com
  7.  * updates: mirrors.aliyun.com
  8. base                                                                              | 3.7 kB     00:00
  9. epel                                                                              | 5.3 kB     00:00
  10. extras                                                                            | 3.4 kB     00:00
  11. my_base                                                                           | 4.0 kB     00:00
  12. percona-release-noarch                                                            | 2.9 kB     00:00
  13. percona-release-x86_64                                                            | 2.9 kB     00:00
  14. updates                                                                           | 3.4 kB     00:00
  15. Resolving Dependencies
  16. --> Running transaction check
  17. ---> Package inotify-tools.x86_64 0:3.14-2.el6 will be installed
  18. --> Finished Dependency Resolution
  19.  
  20. Dependencies Resolved
  21.  
  22. =========================================================================================================
  23.  Package                      Arch                  Version                    Repository           Size
  24. =========================================================================================================
  25. Installing:
  26.  inotify-tools                x86_64                3.14-2.el6                 epel                 46 k
  27.  
  28. Transaction Summary
  29. =========================================================================================================
  30. Install       1 Package(s)
  31.  
  32. Total download size: 46 k
  33. Installed size: 104 k
  34. Downloading Packages:
  35. inotify-tools-3.14-2.el6.x86_64.rpm                                               |  46 kB     00:00
  36. Running rpm_check_debug
  37. Running Transaction Test
  38. Transaction Test Succeeded
  39. Running Transaction
  40.   Installing : inotify-tools-3.14-2.el6.x86_64                                                       1/1
  41.   Verifying  : inotify-tools-3.14-2.el6.x86_64                                                       1/1 
  42.  
  43. Installed:
  44.   inotify-tools.x86_64 0:3.14-2.el6                                                                      
  45.  
  46. Complete!
  47. [root@test-centos6-node1 ~]#

　　2、编写脚本

  1. [root@test-centos6-node1 ~]# cat inotify_rsync.sh
  2. #!/bin/bash
  3. SRC='/root/test/'
  4. DEST='rsyncuser@192.168.0.99::backup'
  5. inotifywait -mrq --timefmt '%Y-%m-%d %H:%M' --format '%T %w %f' -e create,delete,moved_to,close_write ${SRC} |while read DATE TIME DIR FILE;do
  6.         FILEPATH=${DIR}${FILE}
  7.         rsync -az --delete --password-file=/etc/rsync.pass $SRC $DEST &&
  8.         echo "At ${TIME} on ${DATE}, file $FILEPATH was backuped up via rsync" >> /var/log/changelist.log
  9. done
  10. [root@test-centos6-node1 ~]#

　　提示：解释下上面的脚本，首先我们定义要监控的目录src和rsync的地址dest(这个地址就是客户端rsync连接rsync服务端的地址)，然后通过inotifywait来指定监控的资源和事件，以及输出信息的格式，然后每一次触发事件的输出信息就交给while read处理，while read 把事件输出信息分别用DATA TIME DIR FILE来保存；然后把DIR和FILE做合并，得到变化资源的真实路径，然后通过rsync把变化的资源推到rsync服务器上，然后把对应的事件信息写到/var/log/changelist.log中。

　　测试脚本是否能够达到实时备份的效果

　　提示：在客户端运行脚本，在rsync服务端监控/backup里的变化。然后在客户端操作在/root/test/目录下进行文件的增加删除修改，看看是否能够及时的同步到rysnc服务器上

　　提示：可以看到我们在客户端新建一个文件是能够及时的同步到rysnc服务器上的

　　提示：到此我们就实现了把客户端的指定目录下的资源通过inotify监控和rsync实时的把数据同步到rysnc服务器上。监控的事件我们可以在脚本里用inotifywait -e去指定即可；我们发现脚本运行，它是前端运行的，如果我们把CRT窗口关闭了，随之我们的监控也失效了，所以我们希望脚本后台运行

　　脚本以后台方式运行

  1. [root@test-centos6-node1 ~]# bash inotify_rsync.sh &
  2. [1] 1697
  3. [root@test-centos6-node1 ~]#

　　提示：我们把脚本以后台方式执行也是可以正常的把客户端指定目录下的文件同步rsync服务器上，到此inotify+rsync实现实时数据同步就完成了。

Linux系统实时数据同步inotify+rsync的更多相关文章

  1. 实时数据同步inotify+rsync

    inotify inotify是一个实时监控服务,他能实时监控服务器中的目录的变化,发现目录中变化后,在配合rsync服务推送到备份服务器上 inotify要求内核要在2.6.13或之上,通过noti ...

  2. Rsync+inotify 实时数据同步 inotify master 端的配置

    强大的,细致的,异步的文件系统事件监控机制.Linux 内科从 2.6.13 起支持 inotify Inotify 实现的几款软件:Inotify,sersync,lsyncd ※Inotify 实 ...

  3. 【linux运维】rsync+inotify与sersync+rsync实时数据同步笔记

    Rsync(remote sync)远程同步工具,通过rsync可以实现对远程服务器数据的增量备份通过,但rsync自身也有缺陷,同步数据时,rsync采用核心算法对远程服务器的目标文件进行对比,只进 ...

  4. Linux学习系列之Inotify+Rsync实现实时数据同步

    Inotify简介 inotify介绍 inotify是一种强大的.异步的文件系统监控机制,linux内核从2.6.13起,加入了inotify的支持,通过inotify可以监控文件系统中添加.删除. ...

  5. (转)Linux系统sersync数据实时同步

    Linux系统sersync数据实时同步 原文:http://blog.csdn.net/mingongge/article/details/52985259 前面介绍了以守护进程的方式传输或同步数据 ...

  6. rsync+inotify实时数据同步多目录实战

    rsync+inotify实时数据同步多目录实战       inotify配置是建立在rsync服务基础上的配置过程 操作系统 主机名 网卡eth0 默认网关 用途 root@58server1 1 ...

  7. rsync+inotify实时数据同步单目录实战

    rsync+inotify实时数据同步单目录实战   rsync+inotify实时数据同步单目录实战 inotify是一个强大的.细粒度的.异步的文件系统事件监控机制,linux内核从2.6.13起 ...

  8. sersync+rsync实时数据同步

    sersync+rsync实时数据同步 1.相关背景介绍 前面有关文章配置实现了rsync增量同步以及配置为定时同步,但是在实际生产环境中需要实时的监控数据从而进行同步(不间断同步),可以采取inot ...

  9. centos linux 系统日常管理4 scp,rsync,md5sum,sha1sum,strace ,find Rsync 常见错误及解决方法 第十七节课

    centos linux 系统日常管理4  scp,rsync,md5sum,sha1sum,strace ,find Rsync 常见错误及解决方法  第十七节课 rsync可以增量同步,scp不行 ...

随机推荐

  1. C++Review3_关于C++各种概念的串联与梳理

    经过前面两个Review,对代码复用,类的继承概念有了进一步理解. 这里再做一次复盘,把其他概念也串联起来构成一个知识框架. 首先是类和对象的概念.对象指的是特征与技能的结合体,面向对象编程思想的好处 ...

  2. 以windows服务方式快速部署免安装版Postgres数据库

    目录 以windows服务方式快速部署免安装版Postgres数据库 1.下载Postgresql数据库免安装包 2.安装环境准备及验证 解压文件 测试环境依赖 3.创建并初始化数据目录 创建数据目录 ...

  3. 机器学习之——集成算法，随机森林，Bootsing，Adaboost,Staking，GBDT,XGboost

    集成学习 集成算法 随机森林(前身是bagging或者随机抽样)(并行算法) 提升算法(Boosting算法) GBDT(迭代决策树) (串行算法) Adaboost (串行算法) Stacking ...

  4. Ubuntu 18.04 64位安装tensorflow-gpu

    第一步(可直接跳到第二步):安装nvidia显卡驱动 linux用户可以通过官方ppa解决安装GPU驱动的问题.使用如下命令添加Graphic Drivers PPA: 1 sudo add-apt- ...

  5. linux Nginx-1.10.2 安装部署教程

    一.下载Nginx以及依赖组件[root@localhost src]# wget http://nginx.org/download/nginx-1.10.2.tar.gz [root@localh ...

  6. 洛谷P1029 最大公约数和最小公倍数问题 题解

    题目链接:https://www.luogu.com.cn/problem/P1029 题目描述 输入 \(2\) 个正整数 \(x_0,y_0(2 \le x_0 \lt 100000,2 \le ...

  7. Java网络编程——TCP图片上传

    1.编写一个服务器端程序,用来接收图片.创建一个监听指定端口号的ServerSocket服务端对象,在while(true)无限循环中持续调用ServerSocket的accept()方法来接收客户端 ...

  8. apache相关实验-2

    一.Apache+openssl 实现 https HTTPS(全称:Hypertext Transfer Protocol Secure,超文本传输安全协议),是以安全为目标的 HTTP 通道,简单 ...

  9. （三）unittest断言方法的介绍

    断言如同在测试用例上,类似于预期结果与实际结果是否一致,如果一致则表示测试通过,Assert断言很好的用于测试结果判断上,更灵活的对预期结果和实际结果进行对比,下面简单的介绍一下unittest的As ...

  10. POJ 2318 TOYS（叉积+二分）

    题目传送门:POJ 2318 TOYS Description Calculate the number of toys that land in each bin of a partitioned ...