浙江龙网

  1. 首页 > 生活百科 > >

利用inotify和rsync服务实现数据实时同步

生活百科

文件定时同步的实现：利用rsync结合cron计划任务实现：
rsync -av --delete /data/10.0.0.12:/back-a：保留文件属性-v：显示过程-delete：如果源文件没有的，目标文件里面有，就把目标文件里面的删除掉文件实时同步的实现:前提：
??文件发生发生变化的时候就触发同步，但是触发同步需要一个依赖文件状态变化的功能 。
inotify??inotify是系统内核的一个监控服务 ， 属于操作系统内核的一个特有机制，用于监控文件的信息变化 。
查看内核是否支持inotify；
[root@LAP1 data]# ls -l /proc/sys/fs/inotify  ls: cannot access ' ': No such file or directory/proc/sys/fs/inotify:total 0-rw-r--r-- 1 root root 0 Oct 24 23:39 max_queued_events-rw-r--r-- 1 root root 0 Oct 24 23:39 max_user_instances-rw-r--r-- 1 root root 0 Oct 24 23:39 max_user_watchesinotify内核参数:
max_queued_events：inotify 事件队列最大长度，如值太小会出现 Event Queue Overflow 错误，默认值：16384, 生产环境建议调大,比如:327679max_user_instances：每个用户创建inotify实例最大值，默认值：128max_user_watches：可以监视的文件的总数量（inotifywait 单进程），默认值：8192,建议调大说明：??proc里面的参数可以通过sysctl工具来进行更改 。
inotify-tools包主要工具：

  • inotifywait： 在被监控的文件或目录上等待特定文件系统事件（open，close，delete等）发生，常用于实时同步的目录监控（主要使用的就是这个工具）
  • inotifywatch：收集被监控的文件系统使用的统计数据，指文件系统事件发生的次数统计
inotifywait 命令：inotifywait [ options ] file1 [ file2 ] [ file3 ] [ ... ]选项：
-m, --monitor 始终保持事件监听-d, --daemon 以守护进程方式执行 ， 和-m相似，配合-o使用-r, --recursive 递归监控目录数据信息变化-q, --quiet 输出少量事件信息--exclude <pattern> 指定排除文件或目录，使用扩展的正则表达式匹配的模式实现--excludei <pattern> 和exclude相似，不区分大小写-o, --outfile <file> 打印事件存到文件中，注意：使用绝对路径-s, --syslogOutput 发送错误到syslog相当于标准错误输出--timefmt <fmt> 指定时间输出格式--format <fmt> 定义输出格式；即实际监控输出内容-e 指定监听指定的事件 ， 如果省略，表示所有事件都进行监听例如：
# 10.0.0.11[root@LAP1 data]# cat file1[root@LAP1 data]# echo hello > file1[root@LAP1 data]# ll file1-rw-r--r-- 1 root root 6 Oct 24 23:50 file1[root@LAP1 data]# chmod 666 # 10.0.0.11[root@LAP1 data]# inotifywait -mfile1Setting up watches.Watches established.file1 OPENfile1 CLOSE_NOWRITE,CLOSEfile1 MODIFYfile1 OPENfile1 MODIFYfile1 CLOSE_WRITE,CLOSEfile1 ATTRIBinotifywait -e 选项指定的事件类型create #文件或目录创建delete #文件或目录被删除modify #文件或目录内容被写入attrib #文件或目录属性改变close_write #文件或目录关闭，在写入模式打开之后关闭的close_nowrite #文件或目录关闭，在只读模式打开之后关闭的close #文件或目录关闭 ， 不管读或是写模式open #文件或目录被打开lsdir #浏览目录内容moved_to #文件或目录被移动到监控的目录中moved_from #文件或目录从监控的目录中被移动move #文件或目录不管移动到或是移出监控目录都触发事件access #文件或目录内容被读取delete_self #文件或目录被删除，目录本身被删除unmount #取消挂载inotifywait 的--timefmt 时间格式%Y #年份信息 ， 包含世纪信息%y #年份信息，不包括世纪信息%m #显示月份 ， 范围 01-12%d #每月的第几天，范围是 01-31%H #小时信息，使用 24小时制，范围 00-23 %M #分钟，范围 00-59 %S      #秒 ， 范例 0-60inotifywait 的 --format 格式定义%T #输出时间格式中定义的时间格式信息，通过 --timefmt option 语法格式指定时间信息%w #事件出现时，监控的文件或目录的名称信息，相当于dirname%f #事件出现时 ， 将显示监控目录下触发事件的文件或目录信息，否则为空，相当于basename%e #显示发生的事件信息，不同的事件默认用逗号分隔%Xe #显示发生的事件信息，不同的事件指定用X进行分隔例如：监控/data/目录的变化
[root@CentOS8 data]# inotifywait -m --timefmt "%Y-%m-%d %H:%M:%S" --format="%T %w---%f event: %;e" /dataSetting up watches.Watches established.2022-10-24 17:12:57 /data/--- event: OPEN;ISDIR2022-10-24 17:12:57 /data/--- event: ACCESS;ISDIR2022-10-24 17:12:57 /data/--- event: CLOSE_NOWRITE;CLOSE;ISDIR2022-10-24 17:13:06 /data/---file3 event: CREATE2022-10-24 17:13:06 /data/---file3 event: OPEN2022-10-24 17:13:06 /data/---file3 event: ATTRIB2022-10-24 17:13:06 /data/---file3 event: CLOSE_WRITE;CLOSE

推荐阅读


上一篇：flutter系列之:永远不用担心组件溢出的Wrap

下一篇：什么是subsignature和return-type-substitutable