Rsync+Inotify
Rsync这个一般使用系统自带的服务,服务端需要启动客户端无需启动,服务端设置开机自动启动
systemctl start rsyncd
systemctl status rsyncd
systemctl restart rsyncd
systemctl enable rsyncd
Inotify单独下载安装,在客户端安装
服务端配置文件: /etc/rsync.pass 填入账号密码格式root:password
/etc/rsyncd.conf
Vim /etc/rsyncd.conf uid = nobody gid = nobody use chroot = yes max connections = 4 pid file = /var/run/rsyncd.pid lockfile = /var/run/rsyncd.lock log file = /var/log/rsyncd.log # exclude = lost+found/ # # transfer logging = yes # # timeout = 900 # # ignore nonreadable = yes # # # dont compress = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2 # # [BIM] path = /app/services/tomcat-idp/webapps/idp/themes/default/loginimage write only = yes read only = no hosts allow = * list = yes uid = root gid = root auth users = root secrets file = /etc/rsync.pass |
服务器端登陆有ip限制,如果ip变了,请更改hosts allow
客户端配置文件/etc/rsync.pass 填入账号密码格式root:password
客户端同步脚本
#!/bin/bash
src=/app/home/loginUploads/des1=*
dest2=**
deshost=***
deshost2=***
user=root
user2=root
port=873
moudle=BIM
echo "1"
inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w %f' -e modify,delete,create,attrib $src | while read file DATE TIME DIR;
echo "3"
do
echo "1"
rsync -vzrtopg --port $port --progress --delete --password-file=/etc/rsync.pass $src $user@$deshost::$moudle
rsync -vzrtopg --port $port --progress --delete --password-file=/etc/rsync.pass $src $user2@$deshost2::$moudle
echo "${files} was rsynced" >> /var/log/rsync.log 2>&1
done
设置客户端开机自启动
nohup sh /app/inotify.sh &填入 /etc/rc.local
chmod 777 /etc/rc.local
Inotify说明
inotify由inotify-tools包提供。在安装inotify-tools之前,请确保内核版本高于2.6.13,且在/proc/sys/fs/inotify目录下有以下三项,这表示系统支持inotify监控
inotify-tools源码包地址:https://cloud.github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz
tar xf inotify-tools-3.14.tar.gz
./configure --prefix=/usr/local/inotify-tools-3.14
make && make install
ln -s /usr/local/inotify-tools-3.14 /usr/local/inotify
其中inotifywait命令用于等待文件发生变化,所以可以可以实现监控(watch)的功能,该命令是inotify的核心命令。inotifywatch用于收集文件系统的统计数据,例如发生了多少次inotify事件,某文件被访问了多少次等等,一般用不上。
以下是inotify相关的内核参数。
(1)./proc/sys/fs/inotify/max_queued_events:调用inotify_init时分配到inotify instance中可排队的event数的最大值,超出值时的事件被丢弃,但会触发队列溢出Q_OVERFLOW事件。
(2)./proc/sys/fs/inotify/max_user_instances:每一个real user可创建的inotify instances数量的上限。
(3)./proc/sys/fs/inotify/max_user_watches:每个inotify实例相关联的watches的上限,即每个inotify实例可监控的最大目录、文件数量。如果监控的文件数目巨大,需要根据情况适当增加此值
echo 30000000 > /proc/sys/fs/inotify/max_user_watches
inotifywait命令的选项:
-m:表示始终监控,否则应该是监控到了一次就退出监控了
-r:递归监控,监控目录中的任何文件,包括子目录。递归监控可能会超出max_user_watches的值,需要适当调整该值
@<file>:如果是对目录进行递归监控,则该选项用于排除递归目录中不被监控的文件。file是相对路径还是绝对路径由监控目录是相对还是绝对来决定
-q:--quiet的意思,静默监控,这样就不会输出一些无关的信息
-e:指定监控的事件。一般监控的就delete、create、attrib、modify、close_write
--exclude <pattern> :通过模式匹配来指定不被监控的文件,区分大小写
--excludei <pattern>:通过模式匹配来指定不被监控的文件,不区分大小写
--timefmt:监控到事件触发后,输出的时间格式,可指定可不指定该选项,一般设置为[--timefmt '%Y/%m/%d %H:%M:%S']
--format:用户自定义的输出格式,如[--format '%w%f %e%T']
%w:产生事件的监控路径,不一定就是发生事件的具体文件,例如递归监控一个目录,该目录下的某文件产生事件,将输出该目录而非其内具体的文件
%f:如果监控的是一个目录,则输出产生事件的具体文件名。其他所有情况都输出空字符串
%e:产生的事件名称
%T:以"--timefmt"定义的时间格式输出当前时间,要求同时定义"--timefmt"
inotifywait -e可监控的事件:
access:文件被访问
modify:文件被写入
attrib:元数据被修改。包括权限、时间戳、扩展属性等等
close_write:打开的文件被关闭,是为了写文件而打开文件,之后被关闭的事件
close_nowrite:read only模式下文件被关闭,即只能是为了读取而打开文件,读取结束后关闭文件的事件
close:是close_write和close_nowrite的结合,无论是何种方式打开文件,只要关闭都属于该事件
open:文件被打开
moved_to:向监控目录下移入了文件或目录,也可以是监控目录内部的移动
moved_from:将监控目录下文件或目录移动到其他地方,也可以是在监控目录内部的移动
move:是moved_to和moved_from的结合
moved_self:被监控的文件或目录发生了移动,移动结束后将不再监控此文件或目录
create:在被监控的目录中创建了文件或目录
delete:删除了被监控目录中的某文件或目录
delete_self:被监控的文件或目录被删除,删除之后不再监控此文件或目录
umount:挂载在被监控目录上的文件系统被umount,umount后不再监控此目录
isdir :监控目录相关操作