Inotify实现实时备份与调优

Inotify是一种强大的、细粒度的、异步的文件系统监控机制&＃xff0c;linux内核2.6.13起&＃xff0c;加入了Inotify支持&＃xff0c;通过Inotify可以监控文件系统中添加、删除、修改、移动等各种事件&＃xff0c;利用这个内核接口&＃xff0c;Inotify就可以监控文件系统下的变化。

&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;

安装Inotify

1&＃xff09;查看内核是否支持

uname -r

yum install -y inotify-tools




2)检查安装

rpm -qa|grep inotify



3)
Inotify-tools提供的两个工具

inotifywait&＃xff1a;通过inotify API等待被监控文件上的相应事件并返回监控结果。

inotifywatch&＃xff1a;用于收集关于被监视的文件系统的统计数据。

inotifywait:

-m :实时监控。

-d&＃xff1a;后台运行。

-r&＃xff1a;递归&＃xff0c;对子目录监控。

-e&＃xff1a;监控事件。以下

access&＃xff1a;检测文件访问事件。

close_write&＃xff1a;写入关闭事件。

modify&＃xff1a;文件发生变化。

attrib&＃xff1a;文件属性变化事件。

delete&＃xff1a;文件被删除。

--timefmt &＃xff1a;当在--format选项中使用%T时&＃xff0c;--timefrt选项则可以用来指定自定义的符合strftime规范的时间格式&＃xff0c;此时间格式可用的格式符可以通过strftime的手册页获取&＃xff1b;--timefrt后常用的参数是&＃39;%d/%m/%y %H:%M&＃39;&＃xff1b;

--format &＃xff1a;自定义inotifywait的输出格式&＃xff0c;如--format &＃39;%T %w %f&＃39;&＃xff1b;常用的格式符如下&＃xff1a;

%w&＃xff1a;显示被监控文件的文件名&＃xff1b;

%f&＃xff1a;如果发生某事件的对象是目录&＃xff0c;则显示被监控目录的名字&＃xff1b;默认显示为空串&＃xff1b;

%T&＃xff1a;使用--timefmt选项中自定义的时间格式.

eg. inotifywait -mrq --timefmt &＃39;%d/%m/%y %H:%M&＃39; --format &＃39;%T %w%f&＃39; -e close_write /data #输出时间

eg. innotifywait -mrq --format &＃39;%w%f&＃39; -e create,close_write,delete /data #简化输出

-m :永远监控&＃xff0c;实时监控。

-d&＃xff1a;后台运行。

-q&＃xff1a;仅打印监控事件的信息。

-r&＃xff1a;递归&＃xff0c;对子目录监控。

-e&＃xff1a;监控事件。以下

access&＃xff1a;检测文件访问事件。

close_write&＃xff1a;写入关闭事件。

modify&＃xff1a;文件发生变化。

attrib&＃xff1a;文件属性变化事件。

delete&＃xff1a;文件被删除。

--timefmt &＃xff1a;当在--format选项中使用%T时&＃xff0c;--timefrt选项则可以用来指定自定义的符合strftime规范的时间格式&＃xff0c;此时间格式可用的格式符可以通过strftime的手册页获取&＃xff1b;--timefrt后常用的参数是  &＃39;%d/%m/%y %H:%M&＃39;&＃xff1b;

--format &＃xff1a;自定义inotifywait的输出格式&＃xff0c;如--format &＃39;%T %w %f&＃39;&＃xff1b;常用的格式符如下&＃xff1a;

%w&＃xff1a;显示被监控文件的文件名.

%f&＃xff1a;如果发生某事件的对象是目录&＃xff0c;则显示被监控目录的名字&＃xff1b;默认显示为空串&＃xff1b;

%T&＃xff1a;使用--timefmt选项中自定义的时间格式.

eg. inotifywait -mrq --timefmt &＃39;%d/%m/%y %H:%M&＃39; --format &＃39;%T %w%f&＃39; -e close_write /data #输出时间.

eg. innotifywait -mrq --format &＃39;%w%f&＃39; -e create,close_write,delete /data #简化输出.

关于inotify实现实时同步的脚本

inotifywait&＃61;/bin/inotifywait
dirbak&＃61;/data
$inotifywait -mrq --format &＃39;%w%f&＃39; -e modify,delete,create,attrib $dirbak\
|while read file
docd $dirbak/bin/rsync -az --delete ./ rsync://rsync_backup&＃64;10.0.0.7/backup --password-file&＃61;/etc/rsync.password &echo "${file} is bak_file_&＃96;date &＃43;%F:%T&＃96;" >>/tmp/rsync.log 2>&1
done

&&＃xff1a;让rsync在后台队列中运行&＃xff0c;不需要等到执行完后再循环。

&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;

关于inotify的调优

/proc/sys/fs/inotify/max_user_watches :设置inotifywait或inotifywatch命令可以监视的文件数量&＃xff08;单进程&＃xff09;。
/proc/sys/fs/inotify/max_queued_events :设置inotify实例时间&＃xff08;event&＃xff09;队列可容纳的时间数量。
/proc/sys/fs/inotify/max_user_instances :每个用户可以运行inotifywait或inotifywatch的进程数。 默认128不需要设了。

如果访问量大可以往上调&＃xff0c;调整采用echo方式&＃xff0c;写入rc.local即可。

&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;

总结

优点&＃xff1a;监控文件系统事件变化&＃xff0c;通过inotify&＃43;rsync实现实时数据同步。

缺点:  如果大于200个文件&＃xff08;10-100k&＃xff09;&＃xff0c;同步会延迟。

&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;

希望我的文档对你有所帮助&＃xff0c;我会继续更新的

&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;