rsync遠程命令同步詳解

1. rsync簡介

rsync命令是一個遠程數據同步工具,可通過LAN/WAN快速同步多臺主機間的文件。rsync使用所謂的“rsync算法”來使本地和遠程兩個主機之間的文件達到同步,這個算法只傳送兩個文件的不同部分,而不是每次都整份傳送,因此速度相當快。

2. 語法

語法

rsync [OPTION]... SRC DEST
rsync [OPTION]... SRC [USER@]host:DEST
rsync [OPTION]... [USER@]HOST:SRC DEST
rsync [OPTION]... [USER@]HOST::SRC DEST
rsync [OPTION]... SRC [USER@]HOST::DEST
rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

對應於以上六種命令格式,rsync有六種不同的工作模式:

  • 拷貝本地文件。當SRC和DES路徑信息都不包含有單個冒號":"分隔符時就啓動這種工作模式。如:rsync -a /data /backup
  • 使用一個遠程shell程序(如rsh、ssh)來實現將本地機器的內容拷貝到遠程機器。當DST路徑地址包含單個冒號":"分隔符時啓動該模式。如:rsync -avz *.c foo:src
  • 使用一個遠程shell程序(如rsh、ssh)來實現將遠程機器的內容拷貝到本地機器。當SRC地址路徑包含單個冒號":"分隔符時啓動該模式。如:rsync -avz foo:src/bar /data
  • 從遠程rsync服務器中拷貝文件到本地機。當SRC路徑信息包含"::"分隔符時啓動該模式。如:rsync -av [email protected]::www /databack
  • 從本地機器拷貝文件到遠程rsync服務器中。當DST路徑信息包含"::"分隔符時啓動該模式。如:rsync -av /databack [email protected]::www
  • 列遠程機的文件列表。這類似於rsync傳輸,不過只要在命令中省略掉本地機信息即可。如:rsync -v rsync://192.168.78.192/www

3. 參數選項

-v, --verbose 詳細模式輸出。
-q, --quiet 精簡輸出模式。
-c, --checksum 打開校驗開關,強制對文件傳輸進行校驗。
-a, --archive 歸檔模式,表示以遞歸方式傳輸文件,並保持所有文件屬性,等於-rlptgoD。
-r, --recursive 對子目錄以遞歸模式處理。
-R, --relative 使用相對路徑信息。

-b, --backup 創建備份,也就是對於目的已經存在有同樣的文件名時,將老的文件重新命名爲~filename。可以使用--suffix選項來指定不同的備份文件前綴。
--backup-dir 將備份文件(如~filename)存放在在目錄下。
-suffix=SUFFIX 定義備份文件前綴。

-u, --update 僅僅進行更新,也就是跳過所有已經存在於DST,並且文件時間晚於要備份的文件,不覆蓋更新的文件。
-l, --links 保留軟鏈結。
-L, --copy-links 想對待常規文件一樣處理軟鏈結。
--copy-unsafe-links 僅僅拷貝指向SRC路徑目錄樹以外的鏈結。
--safe-links 忽略指向SRC路徑目錄樹以外的鏈結。
-H, --hard-links 保留硬鏈結。
-p, --perms 保持文件權限。
-o, --owner 保持文件屬主信息。
-g, --group 保持文件屬組信息。
-D, --devices 保持設備文件信息。
-t, --times 保持文件時間信息。
-S, --sparse 對稀疏文件進行特殊處理以節省DST的空間。
-n, --dry-run現實哪些文件將被傳輸。
-w, --whole-file 拷貝文件,不進行增量檢測。
-x, --one-file-system 不要跨越文件系統邊界。
-B, --block-size=SIZE 檢驗算法使用的塊尺寸,默認是700字節。
-e, --rsh=command 指定使用rsh、ssh方式進行數據同步。
--rsync-path=PATH 指定遠程服務器上的rsync命令所在路徑信息。
-C, --cvs-exclude 使用和CVS一樣的方法自動忽略文件,用來排除那些不希望傳輸的文件。
--existing 僅僅更新那些已經存在於DST的文件,而不備份那些新創建的文件。
--delete 刪除那些DST中SRC沒有的文件。
--delete-excluded 同樣刪除接收端那些被該選項指定排除的文件。
--delete-after 傳輸結束以後再刪除。
--ignore-errors 及時出現IO錯誤也進行刪除。
--max-delete=NUM 最多刪除NUM個文件。
--partial 保留那些因故沒有完全傳輸的文件,以是加快隨後的再次傳輸。
--force 強制刪除目錄,即使不爲空。
--numeric-ids 不將數字的用戶和組id匹配爲用戶名和組名。
--timeout=time ip超時時間,單位爲秒。
-I, --ignore-times 不跳過那些有同樣的時間和長度的文件。
--size-only 當決定是否要備份文件時,僅僅察看文件大小而不考慮文件時間。
--modify-window=NUM 決定文件是否時間相同時使用的時間戳窗口,默認爲0。
-T --temp-dir=DIR 在DIR中創建臨時文件。
--compare-dest=DIR 同樣比較DIR中的文件來決定是否需要備份。
-P 等同於 --partial。
--progress 顯示備份過程。
-z, --compress 對備份的文件在傳輸時進行壓縮處理。
--exclude=PATTERN 指定排除不需要傳輸的文件模式。
--include=PATTERN 指定不排除而需要傳輸的文件模式。
--exclude-from=FILE 排除FILE中指定模式的文件。
--include-from=FILE 不排除FILE指定模式匹配的文件。
--version 打印版本信息。
--address 綁定到特定的地址。
--config=FILE 指定其他的配置文件,不使用默認的rsyncd.conf文件。
--port=PORT 指定其他的rsync服務端口。
--blocking-io 對遠程shell使用阻塞IO。
-stats 給出某些文件的傳輸狀態。
--progress 在傳輸時現實傳輸過程。
--log-format=formAT 指定日誌文件格式。
--password-file=FILE 從FILE中得到密碼。
--bwlimit=KBPS 限制I/O帶寬,KBytes per second。
-h, --help 顯示幫助信息。

4. 用法

系統環境
服務端:192.168.211.15
客戶端: 192.168.211.16

4.1. 詳細執行輸出

$ rsync -v [email protected]:/root/ansible-operator-v0.13.0.tar /data/

4.2. 假裝執行輸出

$ rsync -nv [email protected]:/root/ansible-operator-v0.13.0.tar /data/
 

4.3. 顯示進度條輸出

$ rsync --progress [email protected]:/root/ansible-operator-v0.13.0.tar /data/

注意:如果當前文件是存在的,拷貝的速度會加快

4.4. 遞歸、壓縮、顯示進度、保留文件屬性傳輸

$ rsync --progress -azv [email protected]:/root/go /data/
$ ls /data
go

4.5. 同步文件的時候,在目標中刪除源中沒有的文件

192.168.211.16

$  ls /data/shell
test.sh          #被刪除的文件

192.168.211.15

$ ls /root/shell
compare1.sh  compare2.sh

192.168.211.16

$ rsync --delete --progress -azv [email protected]:/shell /data/
$ ls /data/shell
compare1.sh  compare2.sh

4.6. 無密碼同步

服務端配置(192.168.211.15)

$ vim /etc/rsyncd.conf
#global settings 
pid file = /var/run/rsyncd.pid
port = 873
lock file = /var/run/rsyncd.lock
log file = /var/log/rsync.log
gid = root
uid = root

module settings 
[data]
path = /root/data
use chroot = no
max connections = 15
read only = yes
write only = no
list = no
ignore errors = yes
timeout = 120

刷新服務

$ /usr/bin/rsync --daemon

客戶端

$ rsync --progress -azv root@192.168.211.15::shell /data/shell #不拷貝源目錄,在目的添加目錄
$ rsync  --delete  --progress -azv root@192.168.211.15::shell /data/shell  #在目標中刪除源中沒有的文件
$ rsync --bwlimit=50 --progress -azv root@192.168.211.15::shell /data/shell  #限制流量同步

4.7. 有密碼同步

服務端

$ vim /etc/rsyncd.conf
#This is the rsync daemon configuration 

#global settings 
pid file = /var/run/rsyncd.pid
port = 873
lock file = /var/run/rsyncd.lock
log file = /var/log/rsync.log
gid = root
uid = root

#module settings 
[monitor_data]
path = /root/monitor_data
use chroot = no
max connections = 15
read only = yes
write only = no
list = no
ignore errors = yes
timeout = 120
auth users = cloudmon
secrets file = /etc/rsyncd.passwd

刷新服務

$ /usr/bin/rsync --daemon

配置用戶密碼

$ echo "cloudmon:redhat123" > /etc/rsyncd.passwd 
$ chmod 600 /etc/rsyncd.passwd
$ mkdir -p /root/monitor_data
$ cp /root/prometheus /root/monitor_data  #傳輸的介質

客戶端

$ useradd cloudmon
$ echo "redhat123" > /home/cloudmon/rsyncd.passwd 
$ chmod 600 /home/cloudmon/rsyncd.passwd 
$ rsync -avz --progress  --password-file=/home/cloudmon/rsyncd.passwd  root@192.168.211.15::monitor_data /data

或者是

$ export RSYNC_PASSWORD="redhat123"
$ rsync -avz --progress  --password-file=/home/cloudmon/rsyncd.passwd  root@192.168.211.15::monitor_data /data

4.8. 寫入同步

服務端

$ vim /etc/rsyncd.conf
#global settings 
pid file = /var/run/rsyncd.pid
port = 873
lock file = /var/run/rsyncd.lock
log file = /var/log/rsync.log
gid = root
uid = root

#module settings 
[write_data]
path = /root/write_data
use chroot = no
max connections = 15
read only = no
list = no
ignore errors = yes
timeout = 120
auth users = cloudmon
secrets file = /etc/rsyncd.passwd
$ mkdir -p /root/write_data
$ touch /root/write_data/hello.txt #在目標(服務端)中刪除源中沒有的文件

客戶端

$ echo "123" > /root/write_file
$ export RSYNC_PASSWORD="redhat123"
$ rsync -avz --progress --delete /root/write_file cloudmon@192.168.211.15::write_data 

參考連接:
https://blog.csdn.net/u010391029/article/details/51746641
https://man.linuxde.net/rsync
https://www.cnblogs.com/ggjucheng/p/5474038.html

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章