sar(System Activity Reporter系統活動情況報告)是目前 Linux 上最爲全面的系統性能分析工具之一,可以從多方面對系統的活動進行報告,包括:文件的讀寫情況、系統調用的使用情況、磁盤I/O、CPU效率、內存使用狀況、進程活動及IPC有關的活動等。本文主要以CentOS 6.3 x64系統爲例,介紹sar命令。
sar命令常用格式
sar [options] [-A] [-o file] t [n]
其中:
t爲採樣間隔,n爲採樣次數,默認值是1;
-o file表示將命令結果以二進制格式存放在文件中,file 是文件名。
options 爲命令行選項,sar命令常用選項如下:
-A:所有報告的總和
-u:輸出CPU使用情況的統計信息
-v:輸出inode、文件和其他內核表的統計信息
-d:輸出每一個塊設備的活動信息
-r:輸出內存和交換空間的統計信息
-b:顯示I/O和傳送速率的統計信息
-a:文件讀寫情況
-c:輸出進程統計信息,每秒創建的進程數
-R:輸出內存頁面的統計信息
-y:終端設備活動情況
-w:輸出系統交換活動信息
1. CPU資源監控
例如,每10秒採樣一次,連續採樣3次,觀察CPU 的使用情況,並將採樣結果以二進制形式存入當前目錄下的文件test中,需鍵入如下命令:
sar -u -o test 10 3
屏幕顯示如下:
[root@localhost ~]# sar -u -o test 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
07:54:19 PM CPU %user %nice %system %iowait %steal %idle
07:54:29 PM all 0.03 0.00 0.08 0.03 0.00 99.87
07:54:39 PM all 0.03 0.00 0.10 0.03 0.00 99.85
07:54:49 PM all 0.03 0.00 0.08 0.00 0.00 99.90
Average: all 0.03 0.00 0.08 0.02 0.00 99.87
輸出項說明:
CPU:all 表示統計信息爲所有 CPU 的平均值。
%user:顯示在用戶級別(application)運行使用 CPU 總時間的百分比。
%nice:顯示在用戶級別,用於nice操作,所佔用 CPU 總時間的百分比。
%system:在覈心級別(kernel)運行所使用 CPU 總時間的百分比。
%iowait:顯示用於等待I/O操作佔用 CPU 總時間的百分比。
%steal:管理程序(hypervisor)爲另一個虛擬進程提供服務而等待虛擬 CPU 的百分比。
%idle:顯示 CPU 空閒時間佔用 CPU 總時間的百分比。
1. 若 %iowait 的值過高,表示硬盤存在I/O瓶頸
2. 若 %idle 的值高但系統響應慢時,有可能是 CPU 等待分配內存,此時應加大內存容量
3. 若 %idle 的值持續低於1,則系統的 CPU 處理能力相對較低,表明系統中最需要解決的資源是 CPU 。
如果要查看二進制文件test中的內容,需鍵入如下sar命令:
sar -u -f test
2. inode、文件和其他內核表監控
例如,每10秒採樣一次,連續採樣3次,觀察覈心表的狀態,需鍵入如下命令:
[root@localhost ~]# sar -v 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
08:01:50 PM dentunusd file-nr inode-nr pty-nr
08:02:00 PM 21817 960 27115 1
08:02:10 PM 21817 960 27115 1
08:02:20 PM 21817 960 27115 1
Average: 21817 960 27115 1
輸出項說明:
dentunusd:目錄高速緩存中未被使用的條目數量
file-nr:文件句柄(file handle)的使用數量
inode-nr:索引節點句柄(inode handle)的使用數量
pty-nr:使用的pty數量
3. 內存和交換空間監控
例如,每10秒採樣一次,連續採樣3次,監控內存分頁:
[root@localhost ~]# sar -r 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
08:05:00 PM kbmemfree kbmemused %memused kbbuffers kbcached kbcommit %commit kbactive kbinact kbdirty
08:05:10 PM 1427248 440044 23.57 20560 249084 238004 6.01 208376 98916 0
08:05:20 PM 1427124 440168 23.57 20560 249084 238004 6.01 208376 98916 0
08:05:30 PM 1427124 440168 23.57 20560 249084 238004 6.01 208376 98916 0
Average: 1427165 440127 23.57 20560 249084 238004 6.01 208376 98916 0
輸出項說明:
kbmemfree:這個值和free命令中的free值基本一致,所以它不包括buffer和cache的空間.
kbmemused:這個值和free命令中的used值基本一致,所以它包括buffer和cache的空間.
%memused:這個值是kbmemused和內存總量(不包括swap)的一個百分比.
kbbuffers和kbcached:這兩個值就是free命令中的buffer和cache.
kbcommit:保證當前系統所需要的內存,即爲了確保不溢出而需要的內存(RAM+swap).
%commit:這個值是kbcommit與內存總量(包括swap)的一個百分比.
4. 內存分頁監控
例如,每10秒採樣一次,連續採樣3次,監控內存分頁:
sar -B 10 3
[root@localhost ~]# sar -B 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
08:42:22 PM pgpgin/s pgpgout/s fault/s majflt/s pgfree/s pgscank/s pgscand/s pgsteal/s %vmeff
08:42:32 PM 0.00 0.00 3.70 0.00 6.50 0.00 0.00 0.00 0.00
08:42:42 PM 0.00 0.00 3.70 0.00 7.60 0.00 0.00 0.00 0.00
08:42:52 PM 0.00 0.00 2.50 0.00 5.90 0.00 0.00 0.00 0.00
Average: 0.00 0.00 3.30 0.00 6.67 0.00 0.00 0.00 0.00
輸出項說明:
pgpgin/s:表示每秒從磁盤或SWAP置換到內存的字節數(KB)
pgpgout/s:表示每秒從內存置換到磁盤或SWAP的字節數(KB)
fault/s:每秒鐘系統產生的缺頁數,即主缺頁與次缺頁之和(major + minor)
majflt/s:每秒鐘產生的主缺頁數.
pgfree/s:每秒被放入空閒隊列中的頁個數
pgscank/s:每秒被kswapd掃描的頁個數
pgscand/s:每秒直接被掃描的頁個數
pgsteal/s:每秒鐘從cache中被清除來滿足內存需要的頁個數
%vmeff:每秒清除的頁(pgsteal)佔總掃描頁(pgscank+pgscand)的百分比
5. I/O和傳送速率監控
例如,每10秒採樣一次,連續採樣3次,報告緩衝區的使用情況,需鍵入如下命令:
sar -b 10 3
[root@localhost ~]# sar -b 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
09:02:28 PM tps rtps wtps bread/s bwrtn/s
09:02:38 PM 0.00 0.00 0.00 0.00 0.00
09:02:48 PM 0.00 0.00 0.00 0.00 0.00
09:02:58 PM 0.00 0.00 0.00 0.00 0.00
Average: 0.00 0.00 0.00 0.00 0.00
輸出項說明:
tps:每秒鐘物理設備的 I/O 傳輸總量
rtps:每秒鐘從物理設備讀入的數據總量
wtps:每秒鐘向物理設備寫入的數據總量
bread/s:每秒鐘從物理設備讀入的數據量,單位爲 塊/s
bwrtn/s:每秒鐘向物理設備寫入的數據量,單位爲 塊/s
6. 進程隊列長度和平均負載狀態監控
例如,每10秒採樣一次,連續採樣3次,監控進程隊列長度和平均負載狀態:
[root@localhost ~]# sar -q 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
09:07:03 PM runq-sz plist-sz ldavg-1 ldavg-5 ldavg-15 blocked
09:07:13 PM 0 176 0.00 0.01 0.05 0
09:07:23 PM 0 176 0.00 0.01 0.05 0
09:07:33 PM 0 176 0.00 0.01 0.05 0
Average: 0 176 0.00 0.01 0.05 0
輸出項說明:
runq-sz:運行隊列的長度(等待運行的進程數)
plist-sz:進程列表中進程(processes)和線程(threads)的數量
ldavg-1:最後1分鐘的系統平均負載(System load average)
ldavg-5:過去5分鐘的系統平均負載
ldavg-15:過去15分鐘的系統平均負載
7. 系統交換活動信息監控
例如,每10秒採樣一次,連續採樣3次,監控系統交換活動信息:
[root@localhost ~]# sar -W 10 3
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
09:12:44 PM pswpin/s pswpout/s
09:12:54 PM 0.00 0.00
09:13:04 PM 0.00 0.00
09:13:14 PM 0.00 0.00
Average: 0.00 0.00
輸出項說明:
pswpin/s:每秒系統換入的交換頁面(swap page)數量
pswpout/s:每秒系統換出的交換頁面(swap page)數量
8. 設備使用情況監控
例如,每10秒採樣一次,連續採樣3次,報告設備使用情況,需鍵入如下命令:
[root@localhost ~]# sar -d 10 3 -p
Linux 3.10.0-514.el7.x86_64 (localhost.localdomain) 11/13/2017 _x86_64_ (4 CPU)
09:19:42 PM DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
09:19:52 PM sdb 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:19:52 PM sda 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:19:52 PM sr0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:19:52 PM DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
09:20:02 PM sdb 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:20:02 PM sda 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:20:02 PM sr0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:20:02 PM DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
09:20:12 PM sdb 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
09:20:12 PM sda 0.20 0.00 4.80 24.00 0.00 3.00 3.00 0.06
09:20:12 PM sr0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
Average: DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
Average: sdb 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
Average: sda 0.07 0.00 1.60 24.00 0.00 3.00 3.00 0.02
Average: sr0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
其中:
參數-p可以打印出sda,hdc等磁盤設備名稱,如果不用參數-p,設備節點則有可能是dev8-0,dev22-0
tps:每秒從物理磁盤I/O的次數.多個邏輯請求會被合併爲一個I/O磁盤請求,一次傳輸的大小是不確定的.
rd_sec/s:每秒讀扇區的次數.
wr_sec/s:每秒寫扇區的次數.
avgrq-sz:平均每次設備I/O操作的數據大小(扇區).
avgqu-sz:磁盤請求隊列的平均長度.
await:從請求磁盤操作到系統完成處理,每次請求的平均消耗時間,包括請求隊列等待時間,單位是毫秒(1秒=1000毫秒).
svctm:系統處理每次請求的平均時間,不包括在請求隊列中消耗的時間。
%util:I/O請求佔CPU的百分比,比率越大,說明越飽和。
1. avgqu-sz 的值較低時,設備的利用率較高。
2. 當%util的值接近 1% 時,表示設備帶寬已經佔滿。