pgsql主從流複製PostgreSQL流複製

pgsql主從流複製PostgreSQL流複製
原理機制
參考--https://yq.aliyun.com/articles/51009

主備總體結構
PG主備流複製的核心部分由walsender，walreceiver和startup三個進程組成。

walsender進程是用來發送WAL日誌記錄的
walreceiver進程是用來接收WAL日誌記錄的
startup進程是用來apply日誌的
配置環境
主機名 IP地址 角色 數據目錄
postgres202 192.168.1.202 primary /home/postgres/data
postgres203 192.168.1.203 standby /home/postgres/data
同步類型
異步方式
同步方式
【異步方式配置】
複製代碼
主數據庫配置

1. 主機192.168.1.202
   1.1 首先需要配置一個賬號進行主從同步。
   創建replica用戶設置密碼，登錄和備份權限。
   CREATE ROLE replica login replication encrypted password 'replica'

1.2 修改pg_hba.conf，增加replica用戶，進行同步。
host replication replica 192.168.1.0/24 md5
這樣，就設置了replica這個用戶可以從192.168.1.0對應的網段進行流複製請求。

1.3 修改postgresql.conf，注意設置下下面幾個地方：
wal_level = hot_standby # 這個是設置主爲wal的主機
max_wal_senders = 5 # 這個設置了可以最多有幾個流複製連接，差不多有幾個從，就設置幾個
wal_keep_segments = 128 # 設置流複製保留的最多的xlog數目
wal_sender_timeout = 60s # 設置流複製主機發送數據的超時時間
max_connections = 100 # 這個設置要注意下，從庫的max_connections必須要大於主庫的

1.4 重啓主庫

2. 備數據庫配置
   主機192.168.1.203
   2.1 使用pg_basebackup建備庫
   pg_basebackup -F p --progress -D /home/postgres/data -h 192.168.1.202 -p 5432 -U replica --password
   這裏使用了pg_basebackup這個命令，/home/postgres/data這個目錄是空的
   成功之後，就可以看到這個目錄中現有的文件都是一樣的了。

2.2 進入到/home/postgres/data目錄，修改recovery.conf，只要修改幾個地方就行了
standby_mode = on # 這個說明這臺機器爲從庫
primary_conninfo = 'host=192.168.1.202 port=5432 user=replica password=replica' # 這個說明這臺機器對應主庫的信息
recovery_target_timeline = 'latest' # 這個說明這個流複製同步到最新的數據

2.3 postgresql.conf中也有幾個地方要進行修改
max_connections = 200 # 一般查多於寫的應用從庫的最大連接數要比較大
hot_standby = on # 說明這臺機器不僅僅是用於數據歸檔，也用於數據查詢
max_standby_streaming_delay = 30s # 數據流備份的最大延遲時間
wal_receiver_status_interval = 10s # 多久向主報告一次從的狀態，當然從每次數據複製都會向主報告狀態，這裏只是設置最長的間隔時間
hot_standby_feedback = on # 如果有錯誤的數據複製，是否向主進行反饋

2.4 啓動備

【主庫】查看配置結果
postgres=# select * from pg_stat_replication ;
-[ RECORD 1 ]----+------------------------------
pid | 1793
usesysid | 24576
usename | replica
application_name | walreceiver
client_addr | 192.168.1.203
client_hostname |
client_port | 32250
backend_start | 2017-09-01 22:23:16.924496+08
backend_xmin | 1676
state | streaming
sent_location | 0/60003E0
write_location | 0/60003E0
flush_location | 0/60003E0
replay_location | 0/60003E0
sync_priority | 0
sync_state | async

複製代碼
【異步更改爲同步方式】

複製代碼

1. 主數據庫配置
   主機192.168.1.202
   1.1 修改postgresql.conf
   synchronous_standby_names = 'standby01'

2. 備數據庫配置
   主機192.168.1.203
   2.2 vi recovery.conf
   standby_mode = on
   primary_conninfo = 'application_name=standby01 host=192.168.1.202 port=5432 user=replica password=replica'
   recovery_target_timeline = 'latest

3.重啓動主備庫

【主庫】查看
postgres=# select * from pg_stat_replication ;
-[ RECORD 1 ]----+----------------------------
pid | 1706
usesysid | 24576
usename | replica
application_name | standby01
client_addr | 192.168.1.203
client_hostname |
client_port | 59550
backend_start | 2017-09-01 23:36:05.7176+08
backend_xmin | 1676
state | streaming
sent_location | 0/70000D0
write_location | 0/70000D0
flush_location | 0/70000D0
replay_location | 0/70000D0
sync_priority | 1
sync_state | sync

也可以用以下方法，類似：

0. Stop postgresql on standby
   standby# /etc/init.d/postgresql stop

1. invoke pg_start_backup() on master
   master# sudo -u postgres psql -c "SELECT pg_start_backup('2011-08-15_04:49)"

2. remove data files on standby
   standby# cd /var/lib/postgresql/9.0/main
   standby# /bin/rm -rf base pg_*
   standby# mkdir pg_xlog; chown postgres.postgres pg_xlog; chmod 700 pg_xlog

3. copy data files
   master# rsync -av --delete /var/lib/postgresql/9.0/main --exclude=pg_xlog
   --exclude=postmaster.pid --exclude=server.crt --exclude=server.key
   /path/to/standby/data/directory

4. invoke pg_stop_backup() on master
   master# sudo -u postgres psql -c "SELECT pg_stop_backup()"

5. start postgresql on standby
   standby# /etc/init.d/postgresql start