inotify+rsync实时同步文件

加入全栈技术交流群(QQ群号:254842154)

对于一个系统管理员来说,如何较实时地在多台服务器之间同步文件,是一个很重要的任务。之前我有一篇文章介绍了如何定时同步服务器文件,但是无法做到实时。今天给大家介绍一个inotify+rsync的实时同步方案,可以应用于文件备份,多台负载服务器代码同步等场景。

前提条件

inotify是linux内核从2.6.13引入的文件系统变化通知机制。因此,需要检查你的服务器版本是否支持inotify机制

grep INOTIFY_USER /boot/config-$(uname -r)

假如输出

CONFIG_INOTIFY_USER=y

则代表支持。

安装inofity-tools工具包

yum install inotify-tools

应用场景

多台负载服务器的代码通常需要实时地保持一致,传统的做法是使用crontab定时任务同步,这种方法不够实时而且效率低下。 今天以inotify+rsync为搭配介绍新的代码同步方案。 假设现在有三台服务器A,B,C,三台服务器是负载服务器,站点所在目录结构一致。现在要实现只发布代码到A服务器,自动同步代码到B和C服务器。首选需要让A服务器可以通过公钥方式登录到B和C,执行以下三步:

①在服务器A生成一对公钥和秘钥。使用 ssh-keygen -t rsa生成,一路回车即可;

②进入秘钥文件夹查看文件。其中idrsa.pub是公钥,idrsa是私钥; cd ~/.ssh

③打开id_rsa.pub文件,并把它的内容拷贝到服务器B和C的 /root/.ssh/authorized_keys 文件中,假如 /root/.ssh 目录下没有 authorized_keys 文件,则新建一个文件。

现在,在A服务器就可以直接通过ssh命令实现无密码登录了

//指定端口号,把ip_address替换成你ip地址
ssh root@ip_address -p 27631
//默认端口号
ssh root@ip_address

编写脚本:

#!/bin/sh
#var
src="/var/www/html/t/"
des_ip="ip_address1 ip_address2"

#function
inotify_fun ()
{

/usr/bin/inotifywait -mrq --timefmt '%Y%m%d-%H:%M' --format '%T %e %w%f' \
-e attrib,close_write,delete,create,modify,move $1|while read time file
do
for ip in $des_ip
do
echo $des_ip
echo "`date +%Y%m%d-%T`: rsync -avzq --delete --progress $1 root@$ip:$1"
rsync -avzrtopgq --delete --progress $1 root@$ip:$1
#echo
done
done
}

#main
for a in $src
do
inotify_fun $a

done

des_ip 中的 ip_address1ip_address2 替换成实际的ip地址,多个ip地址用空格隔开。src是需要实时同步的目录,源服务器和目标服务器的目录结构一致。保存脚本文件为rsync.sh,然后用定时任务运行它一次,运行成功后取消该定时任务(我暂时不知道如何运行脚本一次,只能用这个土方法了。。。哪位大神知道麻烦告知一声)。

inotifywait的e参数表示要监听哪些事件:

access  访问,读取文件。
modify  修改,文件内容被修改。
attrib  属性,文件元数据被修改。
move    移动,对文件进行移动操作。
create  创建,生成新文件
open    打开,对文件进行打开操作。
close   关闭,对文件进行关闭操作。
delete  删除,文件被删除。

查看任务是否在运行

ps -ef |grep inotify

假如修改了脚本文件,需要关闭inotify之后再重新运行定时任务再取消。

sudo pkill inotifywait

标签: inotify, rsync

→ 如果你觉得作者的文章不错,一不小心帮到了你,欢迎打赏作者几包辣条的钱💰