rsync+inotify文件同步配置

1、需要軟件

rsync、inotify-tools

2、通過uname -r查看系統內核進行下載對應軟件

3、軟件安裝分佈：

文件所在主機（客戶端）：rsync、inotify-tools

文件被同步到主機（服務端）：rsync

4、查看服務是否安裝

rpm -qa|grep rsync #檢查rsync是否安裝

rpm -qa |grep notify #確定inotify是否安裝。

5、查看系統是否支持inotify的安裝

[root@inotify-master ~]# ll /proc/sys/fs/inotify/

總用量 0

-rw-r--r-- 1 root root 0 4月  22 14:56 max_queued_events #表示調用inotify_init時分配給inotify instance中可排隊的event的數目的最大值，超出這個值的事件被丟棄，但會觸發IN_Q_OVERFLOW事件。

-rw-r--r-- 1 root root 0 4月  22 14:56 max_user_instances #表示每一個real user ID可創建的inotify instatnces的數量上限。

-rw-r--r-- 1 root root 0 4月  22 14:56 max_user_watches #表示每個inotify instatnces可監控的最大目錄數量。如果監控的文件數目巨大，需要根據情況，適當增加此值的大小。

#顯示這三個文件則證明支持。

6、rsync的安裝

創建同步文件的用戶和目錄

[root@inotify-slave mail]# useradd rsync -s /sbin/nologin -M #添加rsync用戶，同步到主機文件的屬主用戶

[root@inotify-slave mail]# grep rsync /etc/passwd

rsync:x:2004:2004::/home/rsync:/sbin/nologin

[root@inotify-slave mail]# mkdir /backup #創建同步到的目錄

[root@inotify-slave mail]# ll -d /backup/

drwxr-xr-x. 2 root root 4096 4月 22 14:13 /backup/

[root@inotify-slave mail]# chown rsync.rsync /backup/ #更改目錄的用戶

[root@inotify-slave mail]# ll -d /backup/

drwxr-xr-x. 2 rsync rsync 4096 4月 22 14:13 /backup/

安裝

根據安裝包的類型選擇使用yum -y rpm configure&&make&&make install

7、rsync服務端配置

編寫rsync daemon配置文件/etc/rsyncd.conf（不存在需要自己創建）

[root@inotify-slave /]# cat /etc/rsyncd.conf
##rsyncd.conf start##
#同步文件指定用戶(需要指定用戶)
uid = rsync
gid = rsync
#是否重新定義根目錄
use chroot = no
#有多少個客戶端同時傳文件
max connections = 200
#超時時間
timeout = 300
#進程號文件
pid file = /var/run/rsyncd.pid
#日誌文件
lock file = /var/run/rsync.lock
#日誌文件
log file = /var/log/rsyncd.log
#模塊開始
#這個模塊對應的是推送目錄
#模塊名稱隨便起（同步配置使用的模塊名稱，自己隨便起）
[backup]
#同步到的目錄
path = /backup/
#表示出現錯誤忽略錯誤
ignore errors
#表示網絡權限可寫(本地控制真正可寫)
read only = false
#允許/不允許列出文件列表
list = false
#指定允許的網段
hosts allow = 192.168.1.0/24
#拒絕鏈接的地址，一下表示沒有拒絕的鏈接。
hosts deny = 0.0.0.0/32
#虛擬用戶（同步時認證的用戶）
auth users = rsync_backup
#虛擬用戶的密碼文件(自己創建)
secrets file = /etc/rsync.password
#配置文件的結尾
##rsyncd.conf end##

虛擬用戶密碼配置：

[root@inotify-slave /]# echo "rsync_backup:leesir" >/etc/rsync.password #虛擬用戶：密碼

[root@inotify-slave /]# cat /etc/rsync.password

rsync_backup:leesir #注：rsync_backup爲虛擬用戶，leesir爲這個虛擬用戶的密碼

[root@inotify-slave /]# chmod 600 /etc/rsync.password #爲密碼文件提權，增加安全性（必須爲600才生效，爲其他權限認證會失敗）

[root@inotify-slave /]# ll /etc/rsync.password

-rw-------. 1 root root 20 4月 22 14:20 /etc/rsync.password

啓動rsync（客戶端不用啓）

[root@inotify-slave /]# rsync --daemon #啓動rsync服務

[root@inotify-slave /]# ps -ef |grep rsync

root 14871 1 0 14:24 ? 00:00:00 rsync --daemon

root 14873 14788 0 14:24 pts/0 00:00:00 grep rsync

[root@inotify-slave /]# netstat -lnutp |grep rsync

tcp        0      0 0.0.0.0:873                 0.0.0.0:*                   LISTEN      14871/rsync

tcp        0      0 :::873                      :::*                        LISTEN      14871/rsync

8、客戶端配置

rsync客戶端配置：

inotify-master ~]# echo "leesir" >/etc/rsync.password[root@inotify-master ~]# cat /etc/rsync.password
leesir   #注意：這裏只要寫密碼即可，切記。
[root@inotify-master ~]# chmod 600 /etc/rsync.password
[root@inotify-master ~]# ll /etc/rsync.password
-rw------- 1 root root 7 4月  22 14:32 /etc/rsync.password

inotify安裝完無需配置

9、編寫同步腳本

[root@DEV-L002733 shell]# cat inotify.sh

#!/bin/bash

hostip=10.20.13.153

src=/dev/shm/wenguang281/rsynctest/

dst=backup

user=rsync_backup

rsync_passfile=/etc/rsync.password

inotify_home=/usr/local

if [ ! -e "$src" ]||[ ! -e "${rsync_passfile}" ]||[ ! -e "${inotify_home}/bin/inotifywait" ]||[ ! -e "/usr/bin/rsync" ];

 then

  echo "check file and folder!"

  exit 9

fi

${inotify_home}/bin/inotifywait -mrq --timefmt '%d %m %y %H:%M' --format '%T %w%f' -e close_write,delete,create,attrib,modify $src\

|while read file

 do

  cd $src && rsync -aruz -R --delete ./ --timeout=100 
$user@$hostip::$dst --password-file=${rsync_passfile} 2>&1>/dev/null

 done

exit 0

10、腳本後臺執行

[root@inotify-master scripts]# sh inotify.sh & #將腳本加入後臺執行

rsync命令參數

rsync [OPTION]... SRC DEST

rsync [OPTION]... SRC [USER@]HOST:DEST

rsync [OPTION]... [USER@]HOST:SRC DEST

rsync [OPTION]... [USER@]HOST::SRC DEST

rsync [OPTION]... SRC [USER@]HOST::DEST

rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

對應於以上六種命令格式，rsync有六種不同的工作模式：

　　1)拷貝本地文件。當SRC和DES路徑信息都不包含有單個冒號”:”分隔符時就啓動這種工作模式。如：rsync -a /data /backup

　　2)使用一個遠程shell程序(如rsh、ssh)來實現將本地機器的內容拷貝到遠程機器。當DST路徑地址包含單個冒號”:”分隔符時啓動該模式。如：rsync -avz *.c foo:src

　　3)使用一個遠程shell程序(如rsh、ssh)來實現將遠程機器的內容拷貝到本地機器。當SRC地址路徑包含單個冒號”:”分隔符時啓動該模式。如：rsync -avz foo:src/bar /data

　　4)從遠程rsync服務器中拷貝文件到本地機。當SRC路徑信息包含”::”分隔符時啓動該模式。如：rsync -av [email protected]::www /databack

　　5)從本地機器拷貝文件到遠程rsync服務器中。當DST路徑信息包含”::”分隔符時啓動該模式。如：rsync -av /databack [email protected]::www

　　6)列遠程機的文件列表。這類似於rsync傳輸，不過只要在命令中省略掉本地機信息即可。如：rsync -v rsync://172.16.78.192/www

rsync參數的具體解釋如下：

-v, --verbose 詳細模式輸出

-q, --quiet 精簡輸出模式

-c, --checksum 打開校驗開關，強制對文件傳輸進行校驗

-a, --archive 歸檔模式，表示以遞歸方式傳輸文件，並保持所有文件屬性，等於-rlptgoD

-r, --recursive 對子目錄以遞歸模式處理

-R, --relative 使用相對路徑信息

-b, --backup 創建備份，也就是對於目的已經存在有同樣的文件名時，將老的文件重新命名爲~filename。可以使用--suffix選項來指定不同的備份文件前綴。

--backup-dir 將備份文件(如~filename)存放在在目錄下。

-suffix=SUFFIX 定義備份文件前綴

-u, --update 僅僅進行更新，也就是跳過所有已經存在於DST，並且文件時間晚於要備份的文件。(不覆蓋更新的文件)

-l, --links 保留軟鏈結

-L, --copy-links 想對待常規文件一樣處理軟鏈結

--copy-unsafe-links 僅僅拷貝指向SRC路徑目錄樹以外的鏈結

--safe-links 忽略指向SRC路徑目錄樹以外的鏈結

-H, --hard-links 保留硬鏈結

-p, --perms 保持文件權限

-o, --owner 保持文件屬主信息

-g, --group 保持文件屬組信息

-D, --devices 保持設備文件信息

-t, --times 保持文件時間信息

-S, --sparse 對稀疏文件進行特殊處理以節省DST的空間

-n, --dry-run現實哪些文件將被傳輸

-W, --whole-file 拷貝文件，不進行增量檢測

-x, --one-file-system 不要跨越文件系統邊界

-B, --block-size=SIZE 檢驗算法使用的塊尺寸，默認是700字節

-e, --rsh=COMMAND 指定使用rsh、ssh方式進行數據同步

--rsync-path=PATH 指定遠程服務器上的rsync命令所在路徑信息

-C, --cvs-exclude 使用和CVS一樣的方法自動忽略文件，用來排除那些不希望傳輸的文件

--existing 僅僅更新那些已經存在於DST的文件，而不備份那些新創建的文件

--delete 刪除那些DST中SRC沒有的文件

--delete-excluded 同樣刪除接收端那些被該選項指定排除的文件

--delete-after 傳輸結束以後再刪除

--ignore-errors 及時出現IO錯誤也進行刪除

--max-delete=NUM 最多刪除NUM個文件

--partial 保留那些因故沒有完全傳輸的文件，以是加快隨後的再次傳輸

--force 強制刪除目錄，即使不爲空

--numeric-ids 不將數字的用戶和組ID匹配爲用戶名和組名

--timeout=TIME IP超時時間，單位爲秒

-I, --ignore-times 不跳過那些有同樣的時間和長度的文件

--size-only 當決定是否要備份文件時，僅僅察看文件大小而不考慮文件時間

--modify-window=NUM 決定文件是否時間相同時使用的時間戳窗口，默認爲0

-T --temp-dir=DIR 在DIR中創建臨時文件

--compare-dest=DIR 同樣比較DIR中的文件來決定是否需要備份

-P 等同於 --partial

--progress 顯示備份過程

-z, --compress 對備份的文件在傳輸時進行壓縮處理

--exclude=PATTERN 指定排除不需要傳輸的文件模式

--include=PATTERN 指定不排除而需要傳輸的文件模式

--exclude-from=FILE 排除FILE中指定模式的文件

--include-from=FILE 不排除FILE指定模式匹配的文件

--version 打印版本信息

--address 綁定到特定的地址

--config=FILE 指定其他的配置文件，不使用默認的rsyncd.conf文件

--port=PORT 指定其他的rsync服務端口

--blocking-io 對遠程shell使用阻塞IO

-stats 給出某些文件的傳輸狀態

--progress 在傳輸時現實傳輸過程

--log-format=formAT 指定日誌文件格式

--password-file=FILE 從FILE中得到密碼

--bwlimit=KBPS 限制I/O帶寬，KBytes per second

-h, --help 顯示幫助信息

inotify參數

1、實時監控/home的所有事件（包括文件的訪問，寫入，修改，刪除等）

inotifywait -rm/home

2、監控/var/log/messeges中有關httpd的日誌

#!/bin/sh
while 
inotifywait -e modify /var/log/messages;do
    iftail-n1/var/log/messages|grephttpd;
then
        kdialog --msgbox"Apache needs love!"
    fi
 done

inotifywatch

1、統計/home文件系統的事件

inotifywatch -v-e access -e modify -t 60 -r/home

參數說明

inotifywait

語法：
inotifywait [-hcmrq] [-e ] [-t ] [--format ] [--timefmt ] [ ... ]
參數：
-h,–help
輸出幫助信息
@
排除不需要監視的文件，可以是相對路徑，也可以是絕對路徑。
–fromfile
從文件讀取需要監視的文件或排除的文件，一個文件一行，排除的文件以@開頭。
-m, –monitor
接收到一個事情而不退出，無限期地執行。默認的行爲是接收到一個事情後立即退出。
-d, –daemon
跟–monitor一樣，除了是在後臺運行，需要指定–outfile把事情輸出到一個文件。也意味着使用了–syslog。
-o, –outfile
輸出事情到一個文件而不是標準輸出。
-s, –syslog
輸出錯誤信息到系統日誌
-r, –recursive
監視一個目錄下的所有子目錄。
-q, –quiet
指定一次，不會輸出詳細信息，指定二次，除了致命錯誤，不會輸出任何信息。
–exclude
正則匹配需要排除的文件，大小寫敏感。
–excludei
正則匹配需要排除的文件，忽略大小寫。
-t , –timeout
設置超時時間，如果爲0，則無限期地執行下去。
-e , –event
指定監視的事件。
-c, –csv
輸出csv格式。
–timefmt
指定時間格式，用於–format選項中的%T格式。
–format
指定輸出格式。
%w 表示發生事件的目錄
%f 表示發生事件的文件
%e 表示發生的事件
%Xe 事件以“X”分隔
%T 使用由–timefmt定義的時間格式

inotifywatch

語法：
inotifywatch [-hvzrqf] [-e ] [-t ] [-a ] [-d ] [ ... ]
參數：
-h, –help
輸出幫助信息
-v, –verbose
輸出詳細信息
@
排除不需要監視的文件，可以是相對路徑，也可以是絕對路徑。
–fromfile
從文件讀取需要監視的文件或排除的文件，一個文件一行，排除的文件以@開頭。
-z, –zero
輸出表格的行和列，即使元素爲空
–exclude
正則匹配需要排除的文件，大小寫敏感。
–excludei
正則匹配需要排除的文件，忽略大小寫。
-r, –recursive
監視一個目錄下的所有子目錄。
-t , –timeout
設置超時時間
-e , –event
只監聽指定的事件。
-a , –ascending
以指定事件升序排列。
-d , –descending
以指定事件降序排列。

可監聽事件

access	文件讀取
modify	文件更改。
attrib	文件屬性更改，如權限，時間戳等。
close_write	以可寫模式打開的文件被關閉，不代表此文件一定已經寫入數據。
close_nowrite	以只讀模式打開的文件被關閉。
close	文件被關閉，不管它是如何打開的。
open	文件打開。
moved_to	一個文件或目錄移動到監聽的目錄，即使是在同一目錄內移動，此事件也觸發。
moved_from	一個文件或目錄移出監聽的目錄，即使是在同一目錄內移動，此事件也觸發。
move	包括moved_to和 moved_from
move_self	文件或目錄被移除，之後不再監聽此文件或目錄。
create	文件或目錄創建
delete	文件或目錄刪除
delete_self	文件或目錄移除，之後不再監聽此文件或目錄
unmount	文件系統取消掛載，之後不再監聽此文件系統。

rsync+inotify文件同步配置

1、需要軟件

2、通過uname -r查看系統內核進行下載對應軟件

3、軟件安裝分佈：

4、查看服務是否安裝

5、查看系統是否支持inotify的安裝

6、rsync的安裝

創建同步文件的用戶和目錄

安裝

7、rsync服務端配置

編寫rsync daemon配置文件/etc/rsyncd.conf（不存在需要自己創建）

虛擬用戶密碼配置：

啓動rsync（客戶端不用啓）

8、客戶端配置

rsync客戶端配置：

inotify安裝完無需配置

9、編寫同步腳本

10、腳本後臺執行

rsync命令參數

inotify參數

inotifywatch

參數說明

inotifywait

inotifywatch

可監聽事件

python gdal 安裝使用（Windows， python 3.6.8）

nginx中location的root和alias用法區別

lvs+keepalived的安裝與配置

rsync+inotify文件同步配置

nginx的安裝配置及與lvs集成

nginx通過ip-hash算法負載不均問題

Mac下配置sublime實現LaTeX

https://yachay.unat.edu.pe/blog/index.php?comment_area=format_blog&comment_component=blog&comment_co

linux以太網驅動總結