在日常運維工作中,我們經常用到rsync這個同步神器。有時在同步兩個目錄時,會要求删除目标目錄中比源目錄多出的檔案,這種情況下,就可用到rsync的--delete參數來實作這個需求了。
執行個體說明:
在伺服器A上同步/tmp/work目錄到遠端伺服器B的/tmp/work目錄下(A和B已經提前做好ssh無密碼信任跳轉關系了),同時删除B伺服器/tmp/work目錄下相比于A伺服器/tmp/work中多餘的檔案
最近在處理策劃資源檔案的時候需要将目錄A的檔案全部同步到目錄B的檔案,并且把目錄B内多餘的檔案全部删除掉。是以,就想到了使用rsync的--delete參數來實作功能。
1)A伺服器
[root@serverA ~]# cd /tmp/work
[root@serverA work]# ls
a b c d 11
2)B伺服器
[root@serverB ~]# cd /tmp/work
[root@serverB work]# ls
c d 11 12 13 fg 5t
3)從A伺服器同步到B伺服器(假設B伺服器ip是11.11.11.11)
[root@serverA work]# rsync -e "ssh -p22" -avpz --delete ./ [email protected]:/tmp/work/ #注意,--delete參數要放在源目錄和目标目錄前,并且兩個目錄結構一定要一緻!不能使用./*
sending incremental file list
./
deleting fg
deleting 5t
deleting 13
deleting 12
11
a
b
c
d
sent 248 bytes received 110 bytes 716.00 bytes/sec
total size is 0 speedup is 0.00
4)再次檢視B伺服器,發現已經跟A伺服器的/tmp/work目錄同步了,并且删除了多餘的檔案
[root@serverB ~]# cd /tmp/work
[root@serverB work]# ls
********************************************************************************
擴充:
下面根據示例說明幾個用法:
$ mkdir {dirA,dirB} //建立兩個測試目錄
//分别在兩個目錄建立相應的檔案
$ touch dirA/{fileA1.txt,fileA2.txt,fileA3.txt}
$ touch dirB/{fileA1.txt,fileA2.txt,fileA3.txt,fileB1.txt,fileB2.txt,fileB3.txt}
1)将dirA的所有檔案同步到dirB内,并保留檔案的屬主,屬組,檔案權限等資訊。
$ rsync -avz dirA/ dirB/
fileA1.txt
fileA2.txt
fileA3.txt
sent 199 bytes received 72 bytes 542.00 bytes/sec
2)将dirA的所有檔案同步到dirB内,并删除dirB内多餘的檔案
$ rsync -avz --delete dirA/ dirB/ #源目錄和目标目錄結構一定要一緻!!不能是dirA/* dirB/ 或者dirA/ dirB/* 或者 dirA/* dirB/*
deleting fileB3.txt
deleting fileB2.txt
deleting fileB1.txt
sent 203 bytes received 72 bytes 550.00 bytes/sec
3)将dirA的所有檔案同步到dirB,但是在dirB内除了fileB3.txt這個檔案不删之外,其他的都删除。
$ rsync -avz --delete --exclude "fileB3.txt" dirA/ dirB/
4)将dirA目錄内的fileA1.txt和fileA2.txt不同步到dirB目錄内。
$ rsync -avz --exclude="fileA1.txt" --exclude="fileA2.txt" dirA/ dirB/
sent 106 bytes received 31 bytes 274.00 bytes/sec
5) 将dirA目錄内的fileA1.txt和fileA2.txt不同步到dirB目錄内,并且在dirB目錄内删除多餘的檔案。
$ rsync -avz --exclude="fileA1.txt" --exclude="fileA2.txt" --delete dirA/ dirB/
6)将dirA目錄内的fileA1.txt和fileA2.txt不同步到dirB目錄内,并且在dirB目錄内删除多餘的檔案,同時,如果dirB内有fileA2.txt和fileA1.txt這兩個被排除同步的檔案,仍然将其删除。
$ rsync -avz --exclude="fileA1.txt" --exclude="fileA2.txt" --delete-excluded dirA/ dirB/
deleting fileA2.txt
deleting fileA1.txt
sent 109 bytes received 34 bytes 286.00 bytes/sec
這裡可以看到隻有fileA3.txt被同步到dirB目錄内,同時dirB目錄内的fileA1.txt和fileA2.txt兩個被過濾的檔案也被删除掉了。
*********************************************************************************************************
要在Linux下删除海量檔案的情況,需要删除數十萬個檔案。這個是之前的程式寫的日志,增長很快,而且沒什麼用。這個時候,我們常用的删除指令rm -fr * 就不好用了,因為要等待的時間太長。是以必須要采取一些非常手段。我們可以使用rsync的--delete-before參數來實作快速删除大量檔案。
1)建立一個空的檔案夾:
mkdir /tmp/test
2)用rsync删除目标目錄:
rsync --delete-before -a -H -v --progress --stats /tmp/test/ log/
這樣我們要删除的log目錄就會被清空了,删除的速度會非常快。rsync實際上用的是替換原理,處理數十萬個檔案也是秒删。
選項說明:
--delete-before 接收者在傳輸之前進行删除操作
--progress 在傳輸時顯示傳輸過程
--a 歸檔模式,表示以遞歸方式傳輸檔案,并保持所有檔案屬性
--H 保持硬連接配接的檔案
--v 詳細輸出模式
--stats 給出某些檔案的傳輸狀态
***************當你發現自己的才華撐不起野心時,就請安靜下來學習吧***************
本文轉自散盡浮華部落格園部落格,原文連結:http://www.cnblogs.com/kevingrace/p/5766139.html,如需轉載請自行聯系原作者