1、什么是rsync?
?rsync,Rsync英文全稱為Remote synchronization 縮寫rsync
是開源、高速的、可實(shí)現(xiàn)本地以及遠(yuǎn)程,全量以及增量的數(shù)據(jù)復(fù)制(拷貝)工具。
2、全量和增量區(qū)別
全量復(fù)制:
[root@nfs01 ~]# cp -a /etc/ /opt/
[root@nfs01 ~]# \cp -a /etc/ /opt
[root@nfs01 ~]# touch /etc/oldboy.txt
[root@nfs01 ~]# \cp -a /etc/ /opt/
?增量復(fù)制: 只復(fù)制oldboy.txt
3、rsync的作用 工作中需要定時(shí)/實(shí)時(shí)數(shù)據(jù)備份。
本地服務(wù)器目錄、不同機(jī)器、 不同機(jī)房之間的數(shù)據(jù)備份。
都可以用rsync完成。
4、rsync功能特性 ?
支持拷貝普通文件與特殊文件,如鏈接文件,設(shè)備文件等。 ?
支持排除指定文件或目錄同步的功能,相當(dāng)于打包命令tar的排除功能。 ?
可以做到保持原文件或目錄的權(quán)限、時(shí)間、軟硬鏈接、屬主、組等所有屬性均不改變。 ?
可實(shí)現(xiàn)增量復(fù)制,既只復(fù)制發(fā)生變化的數(shù)據(jù),因此數(shù)據(jù)傳輸效率很高。 ?
可以使用rcp,rsh,ssh等方式來配合進(jìn)行隧道加密傳輸文件(rsync本身不對(duì)數(shù)據(jù)加密)。 ?
可以通過socket(進(jìn)程方式)傳輸文件和數(shù)據(jù)(服務(wù)端和客戶端)*。 ?
支持匿名或認(rèn)證(無需系統(tǒng)用戶)進(jìn)程模式傳輸,安全的進(jìn)行數(shù)據(jù)備份及鏡像
5、增量復(fù)制原理
使用 quick check算法,只對(duì)增量的部分復(fù)制,根據(jù)大小屬性的變化進(jìn)行復(fù)制。
?2.x比對(duì)差異后復(fù)制,3.x一邊比對(duì)一邊復(fù)制。
6、rsync三種工作模式介紹
1)本地(local)
?rsync就是一個(gè)命令
rsync命令? 參數(shù)選項(xiàng)?? [源目錄或文件]?? 目的目錄或文件
命令操作:
?rsync命令
a.把數(shù)據(jù)從一個(gè)地方復(fù)制到另一個(gè)地方(僅在一臺(tái)機(jī)器增量),相當(dāng)于cp。
b.通過加參數(shù)實(shí)現(xiàn)刪除文件和清空文件內(nèi)容的功能,相當(dāng)于rm命令。
?c.查看屬性信息功能,相當(dāng)于ls。
a.拷貝實(shí)踐
[root@backup ~]# ls /opt
[root@backup ~]# rsync /etc/hosts /opt
[root@backup ~]# ls /opt
?[root@backup ~]# \cp /etc/hosts /opt
保持屬性:
[root@backup ~]# rsync -zrtopg /etc/hosts /opt/
?[root@backup ~]# ls -lhi /etc/hosts /opt/hosts
b.刪除實(shí)踐
刪除文件內(nèi)容:
?[root@backup ~]# touch /null.txt #空文件
[root@backup ~]# cat /opt/hosts
[root@backup ~]# rsync --delete /null.txt /opt/hosts #讓前面null.txt和后面hosts一樣
[root@backup ~]# rsync -r --delete /null.txt /opt/hosts
[root@backup ~]# cat /opt/hosts
刪除目錄下所有文件:
?[root@backup ~]# mkdir /null
[root@backup ~]# rsync -r --delete /null/ /opt/ #讓后面opt和前面null目錄內(nèi)容保持一致
[root@backup ~]# ls /opt/
c.查看屬性
[root@backup ~]# rsync /etc/hosts
2)遠(yuǎn)程Shell模式
借助類似ssh隧道傳輸數(shù)據(jù),適合不同的機(jī)器之間復(fù)制。
異地拷貝,相當(dāng)于scp,區(qū)別scp是遠(yuǎn)程全量拷貝)
拉門 推門 思考:
pull,拉:從遠(yuǎn)端拉取到本地。
語法: rsync [OPTION...] [USER@]HOST:SRC... [DEST]
rsync命令 參數(shù)選項(xiàng) [認(rèn)證用戶]@[主機(jī)地址]:[源路徑] 本地路徑
語法: push,推:從本地推到遠(yuǎn)端。
rsync [OPTION...] SRC... [USER@]HOST:[DEST]
rsync命令 參數(shù)選項(xiàng) 本地路徑 [認(rèn)證用戶]@[主機(jī)地址]:[目標(biāo)路徑]
push實(shí)踐:
?[root@nfs01 ~]# rsync -avz /etc/hosts root@172.16.1.41:/opt/ #加密傳輸。
檢查:
?[root@backup ~]# cd /opt/
?[root@backup /opt]# ls
rsync -avz /etc/hosts root@172.16.1.41:/opt/
rsync -avz /etc/hosts -e "ssh -p 22" root@172.16.1.41:/opt/
上述命令是等價(jià)的。-e 指定通道 ssh ssh服務(wù)連接客戶端 -p 22指定22端口。
[root@nfs01 ~]# rsync -avz /etc/hosts -e "ssh -p 22" root@172.16.1.41:/opt/
拉的命令:
?rsync -avz root@172.16.1.41:/opt/hosts /opt
rsync -avz -e "ssh -p 22" root@172.16.1.41:/opt/hosts /opt
推拉:
a.參照物,執(zhí)行命令的機(jī)器
b.root@172.16.1.41 使用的用戶和主機(jī),就用主機(jī)和用戶的密碼。
強(qiáng)調(diào)一個(gè)重點(diǎn):適合rsync null和null/ 區(qū)別,null是目錄和目錄下的內(nèi)容, null/只是目錄下的內(nèi)容,不含本身。
3)rsync守護(hù)進(jìn)程模式 首先要搭建rsync服務(wù)端(要有守護(hù)進(jìn)程),然后才能在客戶端實(shí)現(xiàn)推拉數(shù)據(jù)。
企業(yè)運(yùn)維的重要模式,重點(diǎn)講。
?rsync服務(wù)模式:*****開啟后臺(tái)進(jìn)程,接受別人訪問。
7、rsync命令參數(shù) rsync命令參數(shù):
?-v, --verbose 顯示輸出過程
?-z, --compress 壓縮
?-a, --archive 多參數(shù)集合(-rtopgDl)
?-r, --recursive 遞歸
-t, --times 保持修改時(shí)間屬性
?-o, --owner 保持屬主不變
?-p, --perms 保持權(quán)限不變
-g, --group 保持用戶組不變
-l, --links 保持拷貝軟連接
?-q, --quiet 安靜的拷貝
--bwlimit=KBPS 限制I/O帶寬,KBytes per second。
?--delete 刪除
?--exclude 排除
?--exclude-from 從文件中排除
企業(yè)常用參數(shù)組合:-avz或者-vzrtopg
8、rsync守護(hù)進(jìn)程模式應(yīng)用實(shí)踐
(1)以下操作都是在backup服務(wù)器
1)安裝
[root@backup ~]# rsync --version
rsync version 3.1.2 protocol version 31
?[root@backup ~]# yum install rsync
2)配置配置文件/etc/rsyncd.conf
備份cp /etc/rsyncd.conf{,.ori}

創(chuàng)建用戶和備份目錄
?[root@backup ~]# useradd rsync
?[root@backup ~]# id rsync
uid=1001(rsync) gid=1001(rsync) 組=1001(rsync)
[root@backup ~]# mkdir -p /backup
?[root@backup ~]# chown -R rsync.rsync /backup/
[root@backup ~]# ls -ld /backup/
3)啟動(dòng)和檢查
?rsync --daemon(c6及以前)
systemctl start rsyncd
systemctl enable rsyncd
systemctl status rsyncd
?[root@backup ~]# ps -ef|grep sync|grep -v grep #檢查進(jìn)程
[root@backup ~]# netstat -lntup|grep 873 #檢查端口
[root@backup ~]# lsof -i :873 #檢查端口
4)配置密碼文件
?[root@backup ~]# echo "rsync_backup:oldboy" > /etc/rsync.password
?[root@backup ~]# chmod 600 /etc/rsync.password
[root@backup ~]# cat /etc/rsync.password
rsync_backup:oldboy
[root@backup ~]# ls -l /etc/rsync.password
rsync服務(wù)端配置完成。
(2)以下操作都是在客戶端服務(wù)器
以下方法2選1 方法1:
認(rèn)證密碼文件
?[root@nfs01 ~]# echo "oldboy" > /etc/rsync.password
[root@nfs01 ~]# chmod 600 /etc/rsync.password
?[root@nfs01 ~]# cat /etc/rsync.password
oldboy
?[root@nfs01 ~]# ls -l /etc/rsync.password
-rw------- 1 root root 7 4月 15 11:55 /etc/rsync.password
方法2:
?[root@nfs01 ~]# echo ' export RSYNC_PASSWORD=oldboy' >>/etc/bashrc
?[root@nfs01 ~]# tail -1 /etc/bashrc
export RSYNC_PASSWORD=oldboy
?[root@nfs01 ~]# . /etc/bashrc
[root@nfs01 ~]# echo $RSYNC_PASSWORD
rsync客戶端 nfs01 配置完成
(3)守護(hù)進(jìn)程模式,客戶端rsync的命令語法:
配置服務(wù)器端守護(hù)進(jìn)程,實(shí)現(xiàn)數(shù)據(jù)傳輸: 1、服務(wù)器端守護(hù)進(jìn)程。2、客戶端執(zhí)行命令。
拉門、推門 思考:
pull,拉:從遠(yuǎn)端拉取到本地。
語法1(常用):
rsync [OPTION...] [USER@]HOST::SRC... [DEST]
?rsync命令 參數(shù)選項(xiàng) [虛擬用戶]@[主機(jī)地址]::[模塊名] 本地路徑 語法
2: rsync [OPTION...] rsync://[USER@]HOST::SRC... [DEST]
rsync命令 參數(shù)選項(xiàng) rsync://[虛擬用戶]@[主機(jī)地址]/[模塊名] 本地路徑
push,推:從本地推到遠(yuǎn)端。
語法1(常用):
rsync [OPTION...] [DEST] [USER@]HOST::SRC...
?rsync命令 參數(shù)選項(xiàng) 本地路徑 [虛擬用戶]@[主機(jī)地址]::[模塊名]
?語法2:
rsync [OPTION...] [DEST] rsync://[USER@]HOST::SRC...
rsync命令 參數(shù)選項(xiàng) 本地路徑 rsync://[虛擬用戶]@[主機(jī)地址]/[模塊名]
測(cè)試增量
?[root@nfs01 ~]# touch /etc/oldboy.txt
[root@nfs01 ~]# rsync -avz /etc rsync_backup@172.16.1.41::backup
第二種推的語法
[root@nfs01 ~]# rsync -avz /etc rsync://rsync_backup@172.16.1.41/backup