rsync同步命令詳解
一、rsync命令的解釋
sync(Synchronize,即“同步”)為UNIX作業系統的標準系統呼叫,功能為將核心檔案系統緩衝區的所有資料(也即預定將通過低階I/O系統呼叫寫入儲存介質的資料)寫入儲存介質(如硬碟)。
sync是一個linux同步命令,含義為迫使緩衝塊資料立即寫盤並更新超級塊。在linux系統中,為了加快資料的讀取速度,預設情況下,某些資料將不會直接寫入硬碟,而是先暫存記憶體中,如果一個數據被重複寫,這樣速度一定快,但存在一個問題,萬一重新啟動,或者是關機,或者是不正常斷電的情況下,由於資料還沒來得及存入硬碟,會造成資料更新不正常,這時需要命令sync進行資料的寫入,即#sync,在記憶體中尚未更新的的資料會寫入硬碟中。所以在關機或者開機之前最好多執行這個幾次,以確保資料寫入硬碟。
rsync不僅可以遠端同步資料(類似於scp),當然還可以本地同步資料(類似於cp),但不同於cp或scp的一點是,rsync不像cp/scp一樣會覆蓋以前的資料(如果資料已經存在),它會先判斷已經存在的資料和新資料有什麼不同,只有不同時才會把不同的部分覆蓋掉。
scp 用來遠端拷貝資料,通過ssh協議通訊。它的語法很簡單,類似於cp, 唯一不同的是,源地址或者目標地址需要使用遠端主機的ip或者hostname. 例如要把本地的資料拷貝到遠端一臺主機(192.168.0.0)的/data/目錄下,可以這樣實現: scp /dir/filename [email protected]:/data/ 其中filename 可以是目錄也可以是檔案。或者也可以把遠端的檔案拷貝到本地: scp
二、rsync的命令格式:
1. rsync [OPTION]... SRC DEST
2. rsync [OPTION]... SRC [[email protected]]HOST:DEST
3. rsync [OPTION]... [[email protected]]HOST:SRC DEST
4. rsync [OPTION]... [[email protected]]HOST::SRC DEST
5. rsync [OPTION]... SRC [[email protected]
6. rsync [OPTION]... rsync://[[email protected]]HOST[:PORT]/SRC [DEST]
對應於以上六種命令格式,rsync有六種不同的工作模式:
1)拷貝本地檔案。當SRC和DES路徑資訊都不包含有單個冒號”:”分隔符時就啟動這種工作模式。如:rsync -a /data /backup
2)使用一個遠端shell程式(如rsh、ssh)來實現將本地機器的內容拷貝到遠端機器。當DST路徑地址包含單個冒號”:”分隔符時啟動該模式。如:rsync -avz *.c foo:src
3)使用一個遠端shell程式(如rsh、ssh)來實現將遠端機器的內容拷貝到本地機器。當SRC地址路徑包含單個冒號”:”分隔符時啟動該模式。如:rsync -avz foo:src/bar /data
4)從遠端rsync伺服器中拷貝檔案到本地機。當SRC路徑資訊包含”::”分隔符時啟動該模式。如:rsync -av [email protected]::www /databack
5)從本地機器拷貝檔案到遠端rsync伺服器中。當DST路徑資訊包含”::”分隔符時啟動該模式。如:rsync -av /databack [email protected]::www
6)列遠端機的檔案列表。這類似於rsync傳輸,不過只要在命令中省略掉本地機資訊即可。如:rsync -v rsync://172.16.78.192/www
三、rsync引數的具體解釋如下:
-v, --verbose 詳細模式輸出
-q, --quiet 精簡輸出模式
-c, --checksum 開啟校驗開關,強制對檔案傳輸進行校驗
-a, --archive 歸檔模式,表示以遞迴方式傳輸檔案,並保持所有檔案屬性,等於-rlptgoD
-r, --recursive 對子目錄以遞迴模式處理
-R, --relative 使用相對路徑資訊
-b, --backup 建立備份,也就是對於目的已經存在有同樣的檔名時,將老的檔案重新命名為~filename。可以使用--suffix選項來指定不同的備份檔案字首。
--backup-dir 將備份檔案(如~filename)存放在在目錄下。
-suffix=SUFFIX 定義備份檔案字首
-u, --update 僅僅進行更新,也就是跳過所有已經存在於DST,並且檔案時間晚於要備份的檔案。(不覆蓋更新的檔案)
-l, --links 保留軟鏈結
-L, --copy-links 想對待常規檔案一樣處理軟鏈結
--copy-unsafe-links 僅僅拷貝指向SRC路徑目錄樹以外的鏈結
--safe-links 忽略指向SRC路徑目錄樹以外的鏈結
-H, --hard-links 保留硬鏈結
-p, --perms 保持檔案許可權
-o, --owner 保持檔案屬主資訊
-g, --group 保持檔案屬組資訊
-D, --devices 保持裝置檔案資訊
-t, --times 保持檔案時間資訊
-S, --sparse 對稀疏檔案進行特殊處理以節省DST的空間
-n, --dry-run現實哪些檔案將被傳輸
-W, --whole-file 拷貝檔案,不進行增量檢測
-x, --one-file-system 不要跨越檔案系統邊界
-B, --block-size=SIZE 檢驗演算法使用的塊尺寸,預設是700位元組
-e, --rsh=COMMAND 指定使用rsh、ssh方式進行資料同步
--rsync-path=PATH 指定遠端伺服器上的rsync命令所在路徑資訊
-C, --cvs-exclude 使用和CVS一樣的方法自動忽略檔案,用來排除那些不希望傳輸的檔案
--existing 僅僅更新那些已經存在於DST的檔案,而不備份那些新建立的檔案
--delete 刪除那些DST中SRC沒有的檔案
--delete-excluded 同樣刪除接收端那些被該選項指定排除的檔案
--delete-after 傳輸結束以後再刪除
--delete-before 接收者在傳輸之前進行刪除操作
--ignore-errors 及時出現IO錯誤也進行刪除
--max-delete=NUM 最多刪除NUM個檔案
--partial 保留那些因故沒有完全傳輸的檔案,以是加快隨後的再次傳輸
--force 強制刪除目錄,即使不為空
--numeric-ids 不將數字的使用者和組ID匹配為使用者名稱和組名
--timeout=TIME IP超時時間,單位為秒
-I, --ignore-times 不跳過那些有同樣的時間和長度的檔案
--size-only 當決定是否要備份檔案時,僅僅察看檔案大小而不考慮檔案時間
--modify-window=NUM 決定檔案是否時間相同時使用的時間戳視窗,預設為0
-T --temp-dir=DIR 在DIR中建立臨時檔案
--compare-dest=DIR 同樣比較DIR中的檔案來決定是否需要備份
-P 等同於 --partial
--progress 顯示備份過程,在傳輸時現實傳輸過程,顯示進度條
-z, --compress 對備份的檔案在傳輸時進行壓縮處理
--exclude=PATTERN 指定排除不需要傳輸的檔案模式
--include=PATTERN 指定不排除而需要傳輸的檔案模式
--exclude-from=FILE 排除FILE中指定模式的檔案
--include-from=FILE 不排除FILE指定模式匹配的檔案
--version 列印版本資訊
--address 繫結到特定的地址
--config=FILE 指定其他的配置檔案,不使用預設的rsyncd.conf檔案
--port=PORT 指定其他的rsync服務埠
--blocking-io 對遠端shell使用阻塞IO
-stats 給出某些檔案的傳輸狀態
--log-format=formAT 指定日誌檔案格式
--password-file=FILE 從FILE中得到密碼
--bwlimit=KBPS 限制I/O頻寬,KBytes per second
-h, --help 顯示幫助資訊
四、rsync命令例項
(1)將dirA的所有檔案同步到dirB內,並保留檔案的屬主,屬組,檔案許可權等資訊。
$ rsync -avz dirA/ dirB/
(2)將dirA的所有檔案同步到dirB內,並刪除dirB內多餘的檔案
$ rsync -avz --delete dirA/ dirB/ #源目錄和目標目錄結構一定要一致!!不能是dirA/* dirB/ 或者dirA/ dirB/* 或者 dirA/* dirB/*
(3)將dirA的所有檔案同步到dirB,但是在dirB內除了fileB3.txt這個檔案不刪之外,其他的都刪除。
$ rsync -avz --delete --exclude "fileB3.txt" dirA/ dirB/
(4)將dirA目錄內的fileA1.txt和fileA2.txt不同步到dirB目錄內。
$ rsync -avz --exclude="fileA1.txt" --exclude="fileA2.txt" dirA/ dirB/
(5) 將dirA目錄內的fileA1.txt和fileA2.txt不同步到dirB目錄內,並且在dirB目錄內刪除多餘的檔案。
$ rsync -avz --exclude="fileA1.txt" --exclude="fileA2.txt" --delete dirA/ dirB/
(6)將dirA目錄內的fileA1.txt和fileA2.txt不同步到dirB目錄內,並且在dirB目錄內刪除多餘的檔案,同時,如果dirB內有fileA2.txt和fileA1.txt這兩個被排除同步的檔案,仍然將其刪除。
$ rsync -avz --exclude="fileA1.txt" --exclude="fileA2.txt" --delete-excluded dirA/ dirB/