rsync+inotify实现多台web数据动态同步操作步骤

183 阅读 0 评论 121 点赞

我是靠谱客的博主心灵美蜜粉，最近开发中收集的这篇文章主要介绍rsync+inotify实现多台web数据动态同步操作步骤，觉得挺不错的，现在分享给大家，希望可以做个参考。

概述

*背景：由于无存储共享设备，web集群中的代码均存放在本地，最终导致web节点之间的数据无法一致。
*解决办法：采用rsync+inotify，实现多台web数据动态同步
*解决思路：比如有a、b、c、d四台web，为解决哪台服务器为源数据服务器，我们在A服务器上安装rsync+inotify，然后将一个二级域名指向A服务器，这样以后网站编辑、开发人员之间访问二级域名进行日常网站更新，A服务器在检测到本地有数据更新时，便动态（触发式）向其它服务器发送更新数据。
*注意：一定要使用rsync相同的版本，否则会出现未知错误。
*选择rsync+inotify的理由：在常规的数据同步应用案例中，大多数人会选择使用rsync来完成数据同步，选择rsync+inotify的理由如下

复制代码

代码如下:

1、服务器性能：rsync只能实现定时更新，无论网站有无文件更新，rsync都会按着定时任务去检查文件是否有更新，当数据文件较大时会使服务器性能下降；而rsync+inotify
为触发式更新，也就是说只有当某个文件发生改动时才会更新，这样一来对服务器性能影响较小。
2、数据实时性：如果选择rsync，每隔多长时间同步一次数据是个问题，时间越短，对性能影响就越大。时间太长，用户/编辑无法接受。采用rsync+inotify可实现实时更新，
当A服务器文件有更新时，其它服务器立即更新

*环境拓扑

复制代码

代码如下:

A：192.168.1.101
B：192.168.1.102
C：192.168.1.103
D：192.168.1.104
注：数据源服务器为A，目标服务器为B、C、D

*一、目标服务器安装rsync （在B、C、D服务器上操作，安装配置均一样）
*安装rsync 下载地址：http://rsync.samba.org/

复制代码

代码如下:

cd /data/software
wget https://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz
tar zxvf rsync-3.0.9.tar.gz
cd rsync-3.0.9
./configure
make
make install

*安装完成后显示信息

复制代码

代码如下:

mkdir -p /usr/local/bin
/usr/bin/install -c -m 755 rsync /usr/local/bin
mkdir -p /usr/local/share/man/man1
mkdir -p /usr/local/share/man/man5
if test -f rsync.1; then /usr/bin/install -c -m 644 rsync.1 /usr/local/share/man/man1; fi
if test -f rsyncd.conf.5; then /usr/bin/install -c -m 644 rsyncd.conf.5 /usr/local/share/man/man5; fi

*配置rsync
*#vi /etc/rsync.conf 加入如下内容

复制代码

代码如下:

uid = root
gid = root
use chroot = no
max connections = 20
strict modes = yes
log file = /data/logs/rsyncd/rsyncd.log
pid file = /data/logs/rsyncd/rsyncd.pid
lock file = /data/logs/rsyncd/rsync.lock
log format = %t %a %m %f %b
[web]
path = /data/vhosts/it121net/
auth users = username
read only = no
hosts allow = 192.168.1.0/24 #可以是IP段，也可以是IP地址
list = no
uid = root
gid = root
secrets file = /etc/rsync.passwd
ignore errors = yes

*创建目录,用于存放日志。

复制代码

代码如下:

mkdir /data/logs/rsyncd

*创建认证
*#vi /etc/rsync.passwd

复制代码

代码如下:

username:passwd

*#chmod 600 /etc/rsync.passwd
*启动rsync，启动后使用netstat查看，会发现系统已启动873端口

复制代码

代码如下:

# rsync --daemon --config=/etc/rsync.conf

*加入开机启动

复制代码

代码如下:

# echo "rsync --daemon --config=/etc/rsync.conf" >>/etc/rc.local

*关闭

复制代码

代码如下:

killall rsync

*二、源服务器安装rsync+inotify （在a服务器上操作）
*安装rsync（仅安装即可，不需配置）

复制代码

代码如下:

cd /data/software
wget https://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz
tar zxvf rsync-3.0.9.tar.gz
cd rsync-3.0.9
./configure
make
make install

*echo "passwd" > /etc/rsync-client.passwd
*chmod 600 /etc/rsync-client.passwd
*安装inotify 下载地址：https://github.com/rvoicilas/inotify-tools/wiki/

复制代码

代码如下:

cd /data/software
wget http://cloud.github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz
tar zxvf inotify-tools-3.14.tar.gz
cd inotify-tools-3.14
./configure
make
make install

*创建启动脚本
*#vi /etc/rsync-web.sh 加入如下内容

复制代码

代码如下:

#!/bin/sh
SRC=/data/vhosts/it121net/
DES=web
WEB2=192.168.1.102
WEB3=192.168.1.103
WEB4=192.168.1.104
USER=username
/usr/local/bin/inotifywait -mrq -e create,move,delete,modify $SRC | while read D E F
do
rsync -ahqzt --password-file=/etc/rsync-client.passwd --delete $SRC $USER@$WEB2::$DES
rsync -ahqzt --password-file=/etc/rsync-client.passwd --delete $SRC $USER@$WEB3::$DES
rsync -ahqzt --password-file=/etc/rsync-client.passwd --delete $SRC $USER@$WEB4::$DES
done
#注意：网络上面大部分都是显示一个中杠，可能是编码的事情，实际是应该是两个杠。

*增加权限

复制代码

代码如下:

#chmod +x /etc/rsync-web.sh

*启动脚本

复制代码

代码如下:

#nohup /etc/rsync-web.sh & //必须使用nohup放入后台执行，否则关闭终端后此脚本进程会自动结束
/etc/rsync-web.sh &

*关闭脚本

复制代码

代码如下:

sudo pkill rsync
sudo pkill inotifywait