Sersync的實時同步

今日內(nèi)容：

1.什么是實時同步

只要當(dāng)前目錄發(fā)生變化則會觸發(fā)一個事件，事件觸發(fā)后將變化的目錄同步至遠(yuǎn)程服務(wù)器

2.實時同步的原理

實時同步需要借助inotify通知接口，用來監(jiān)控本地目錄的變化，如果監(jiān)控本地的目錄發(fā)生變更則觸發(fā)動作這個動作可以是進(jìn)行同步操作，或者其他操作。

3.實時同步場景

場景一：解決nfs單點故障保證同步的數(shù)據(jù)連續(xù)性

場景二：本地?zé)o縫遷移云端

4.實時同步工具

sersync

5.實時同步的案例 （web + nfs +sersync +backup）

案例實現(xiàn)所需環(huán)境

服務(wù)器名稱 服務(wù)器ip地址（NAT） 服務(wù)器ip地址（LAN）
web 10.0.0.7 172.16.1.7
nfs 10.0.0.31 172.16.1.31
backup 10.0.0.41 172.16.1.41

web服務(wù)器的操作

1.搭建web服務(wù)器，部署網(wǎng)盤項目然后測試上傳視頻

進(jìn)程以咋樣的方式去訪問這個目錄取決于這個進(jìn)程運行的身份對這個目錄所擁有的權(quán)限

httpd這個進(jìn)程以apache的身份去訪問index-php目錄取決于httpd這個進(jìn)程運行的apach身份對這個index-php目錄所擁有的權(quán)限

1）創(chuàng)建用戶
[root@web01 ~]# groupadd -g 666 www
[root@web01 ~]# useradd -u666 -g666 www

2）安裝軟件
[root@web01 ~]# yum install httpd php php-mbstring php-gd -y

3）修改httpd.conf的配置，將用戶運行的進(jìn)程修改為www
[root@web01 ~]# sed -i '/^User/c User www' /etc/httpd/conf/httpd.conf
[root@web01 ~]# sed -i '/^Group/c Group www' /etc/httpd/conf/httpd.conf

4)重啟Httpd進(jìn)程
[root@web01 ~]# systemctl restart httpd
[root@web01 ~]# ps aux|grep httpd
root 44986 0.5 1.2 310456 12000 ? Ss 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44987 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44988 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44989 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44990 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44991 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND

5)上傳代碼
[root@web01 ~]# cd /var/www/html/
[root@web01 html]# wget http://static.kodcloud.com/update/download/kodexplorer4.40.zip
[root@web01 html]# unzip kodexplorer4.40.zip
[root@web01 html]# chown -R www.www /var/www/html/

2.捕獲上傳的靜態(tài)資源所存放的位置

/var/www/html/data/User/admin/home

NFS服務(wù)器的操作

3.安裝配置NFS服務(wù)，將web靜態(tài)資源存放的位置 掛載到NFS的共享目錄中

1)安裝nfs服務(wù)端
[root@nfs ~]# yum install nfs-utils -y

2）配置nfs服務(wù)端
[root@nfs ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)

3）創(chuàng)建UID、GID為666的用戶
[root@nfs ~]# groupadd -g 666 www
[root@nfs ~]# useradd -u666 -g666 www

4）創(chuàng)建對外共享的目錄 （ 空間要大，可以是一個新掛載的存儲盤 ）
[root@nfs ~]# mkdir /data
[root@nfs ~]# chown -R www.www /data

5）重啟NFS服務(wù)
[root@nfs ~]# systemctl restart nfs

  1. 在web節(jié)點上，將靜態(tài)資源目錄的數(shù)據(jù)推送到NFS存儲上。
    [root@web01 html]# cd /var/www/html/data/User/admin/home/
    [root@web01 home]# scp -rp * root@172.16.1.31:/data

  2. 在web節(jié)點上，執(zhí)行掛載操作。
    [root@web01 admin]# mount -t nfs 172.16.1.31:/data /var/www/html/data/User/admin/home/

4.再次進(jìn)行上傳，檢測上傳的資源是否已經(jīng)成功寫入NFS存儲中

[root@nfs ~]# ll /data
-rw-r--r-- 1 www www 112114508 4月 17 09:48 05 老男孩教育-標(biāo)桿班級-NFS總結(jié).mp4
-rw-r--r-- 1 www www 101872284 4月 17 09:57 06 老男孩教育-標(biāo)桿班級-NFS練習(xí).mp4
drwxr-xr-x 2 www www 210 4月 17 09:46 desktop
drwxr-xr-x 2 www www 6 4月 17 09:46 視頻
drwxr-xr-x 2 www www 6 4月 17 09:46 圖片
drwxr-xr-x 2 www www 6 4月 17 09:46 我的文檔
drwxr-xr-x 2 www www 6 4月 17 09:46 音樂

NFS如果一旦故障，那么資源就會丟失，我們需要給 NFS 增加一個備用節(jié)點。

1.需要實時監(jiān)控NFS的/data目錄，一旦發(fā)生變化，就馬上同步到Backup服務(wù)器。 需要在NFS上安裝Sersync
2.Backup服務(wù)器是不是需要準(zhǔn)備一個目錄接收NFS推送過來的數(shù)據(jù)。  /data 目錄
3.假設(shè)NFS故障，如何快速將Backup頂用起來。需要Backup也做成一個NFS服務(wù)端，共享/data目錄。

Backup服務(wù)器：（NFS到backup的守護(hù)進(jìn)程）

1）安裝rsync
[root@backup ~]# yum install rsync -y

2）配置rsync
[root@backup ~]# cat /etc/rsyncd.conf
uid = www
gid = www
port = 873
fake super = yes
use chroot = no
max connections = 200
timeout = 600
ignore errors
read only = false
list = false
auth users = rsync_backup
secrets file = /etc/rsync.passwd
log file = /var/log/rsyncd.log
#####################################
[backup]
comment = welcome to oldboyedu backup!
path = /backup

[data]
path = /data

3）根據(jù)配置完成對應(yīng)初始化操作
[root@backup ~]# groupadd -g 666 www
[root@backup ~]# useradd -u 666 -g666 www
[root@backup ~]# mkdir /backup /data
[root@backup ~]# chown -R www.www /backup/ /data/

[root@backup ~]# echo "rsync_backup:123456" > /etc/rsync.passwd

[root@backup ~]# chmod 600 /etc/rsync.passwd

[root@backup ~]# echo "123456" > /etc/rsync.pass

4）重啟Rsync服務(wù)
[root@backup ~]# systemctl restart rsyncd

5）為backup服務(wù)器，啟動NFS共享存儲服務(wù)。
[root@backup ~]# yum install nfs-utils -y
[root@backup ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)

[root@backup ~]# systemctl enable nfs
sys[root@backup ~]# systemctl start nfs

配置NFS實時同步，需要監(jiān)控NFS的/data目錄

1.下載并解壓sersync軟件包
[root@nfs ~]# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz
[root@nfs ~]# mv GNU-Linux-x86/ /usr/local/sersync

2.修改配置文件

 vim /usr/local/sersync/confxml.xml
<?xml version="1.0" encoding="ISO-8859-1"?>
<head version="2.5">
    <host hostip="localhost" port="8008"></host>
    <debug start="false"/>
    <fileSystem xfs="false"/>
    <filter start="false">
    <exclude expression="(.*)\.svn"></exclude>
    <exclude expression="(.*)\.gz"></exclude>
    <exclude expression="^info/*"></exclude>
    <exclude expression="^static/*"></exclude>
    </filter>
    <inotify>
    <delete start="true"/>
    <createFolder start="true"/>
    <createFile start="true"/>
    <closeWrite start="true"/>
    <moveFrom start="true"/>
    <moveTo start="true"/>
    <attrib start="true"/>
    <modify start="true"/>
    </inotify>

    <sersync>
    <localpath watch="/data">
        <remote ip="172.16.1.41" name="data"/>
    </localpath>
    <rsync>
        <commonParams params="-avz"/>
        <auth start="true" users="rsync_backup" passwordfile="/etc/rsync.pass"/>
        <userDefinedPort start="false" port="874"/><!-- port=874 -->
        <timeout start="true" time="100"/><!-- timeout=100 -->
        <ssh start="false"/>
    </rsync>
    <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/><!--default every 60mins execute once-->
    <crontab start="false" schedule="600"><!--600mins-->
        <crontabfilter start="false">
        <exclude expression="*.php"></exclude>
        <exclude expression="info/*"></exclude>
        </crontabfilter>
    </crontab>
    <plugin start="false" name="command"/>
    </sersync>

    <plugin name="command">
    <param prefix="/bin/sh" suffix="" ignoreError="true"/>  <!--prefix /opt/tongbu/mmm.sh suffix-->
    <filter start="false">
        <include expression="(.*)\.php"/>
        <include expression="(.*)\.sh"/>
    </filter>
    </plugin>

    <plugin name="socket">
    <localpath watch="/opt/tongbu">
        <deshost ip="192.168.138.20" port="8009"/>
    </localpath>
    </plugin>
    <plugin name="refreshCDN">
    <localpath watch="/data0/htdocs/cms.xoyo.com/site/">
        <cdninfo domainname="ccms.chinacache.com" port="80" username="xxxx" passwd="xxxx"/>
        <sendurl base="http://pic.xoyo.com/cms"/>
        <regexurl regex="false" match="cms.xoyo.com/site([/a-zA-Z0-9]*).xoyo.com/images"/>
    </localpath>
    </plugin>
</head>

啟動 配置文件

[root@nfs ~]# /usr/local/sersync/sersync2 -dro /usr/local/sersync/confxml.xml

NFS故障了，如何實現(xiàn)切換？

2.web切換操作
[root@web01 ~]# umount -lf /var/www/html/data/User/admin/home && mount -t nfs 172.16.1.41:/data /var/www/html/data/User/admin/home

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容