作爲Linux系統管理員，最主要的工作是優化系統配置，使應用在系統上以最優的狀態運行，但是由於硬件問題、軟件問題、網絡環境等的複雜性 和多變性，導致對系統的優化變得異常複雜，如何定位性能問題出在哪個方面，是性能優化的一大難題， 本文從系統入手，重點講述由於系統軟、硬件配置不當可能造成的性能問題，並且給出了檢測系統故障和優化性能的一般方法和流程。
1
cpu性能評估
Cpu是影響Linux性能的主要因素之一，下面先介紹幾個查看CPU性能的命令。
1.1
vmstat命令
該命令可以顯示關於系統各種資源之間相關性能的簡要信息，這裏我們主要用它來看CPU的一個負載情況。
下面是vmstat命令在某個系統的輸出結果：
[root@centos6 ~]# vmstat 2 3
procs -----------memory------ ----swap-- -----io---- --system-- -----cpu------
r b swpd free buff cache si so bi bo in cs us sy id wa st
0 0 0 162240 8304 67032 0 0 13 21 1007 23 0 1 98 0 0
0 0 0 162240 8304 67032 0 0 1 0 1010 20 0 1 100 0 0
0 0 0 162240 8304 67032 0 0 1 1 1009 18 0 1 99 0 0
對上面每項的輸出解釋如下：
◆procs
r | 表示運行和等待cpu時間片的進程數，這個值如果長期大於系統CPU的個數，說明CPU不足，需要增加CPU。 |
| b | 表示在等待資源的進程數，比如正在等待I/O、或者內存交換等。 |
◆memory
swpd | 表示切換到內存交換區的內存數量（以k爲單位）。如果swpd的值不爲0，或者比較大，只要si、so的值長期爲0，這種情況下一般不用擔心，不會影響系統性能。 |
| free | 表示當前空閒的物理內存數量（以k爲單位） |
| buff | 表示buffers cache的內存數量，一般對塊設備的讀寫才需要緩衝。 |
cache | 表示page cached的內存數量，一般作爲文件系統cached，頻繁訪問的文件都會被cached， 如果cache值較大，說明cached的文件數較多，如果此時IO中bi比較小，說明文件系統效率,比較好。 |
◆swap
| si | 表示由磁盤調入內存，也就是內存進入內存交換區的數量。 |
| so | 表示由內存調入磁盤，也就是內存交換區進入內存的數量。 一般情況下，si、so的值都爲0，如果si、so的值長期不爲0，則表示系統內存不足。需要增加系統內存。 |
◆IO項顯示磁盤讀寫狀況
| Bi | 表示從塊設備讀入數據的總量（即讀磁盤）（每秒kb）。 |
| Bo | 表示寫入到塊設備的數據總量（即寫磁盤）（每秒kb）。 這裏我們設置的bi+bo參考值爲1000，如果超過1000，而且wa值較大，則表示系統磁盤IO有問題，應該考慮提高磁盤的讀寫性能。 |
| system | 顯示採集間隔內發生的中斷數 |
| in | 表示在某一時間間隔中觀測到的每秒設備中斷數。 |
| cs | 表示每秒產生的上下文切換次數。 |
上面這2個值越大，會看到由內核消耗的CPU時間會越多。
CPU項顯示了CPU的使用狀態，此列是我們關注的重點。
| us | 顯示了用戶進程消耗的CPU 時間百分比。us的值比較高時，說明用戶進程消耗的cpu時間多，但是如果長期大於50%，就需要考慮優化程序或算法。 |
| sy | 顯示了內核進程消耗的CPU時間百分比。Sy的值較高時，說明內核消耗的CPU資源很多。 根據經驗，us+sy的參考值爲80%，如果us+sy大於 80%說明可能存在CPU資源不足。 |
| id | 顯示了CPU處在空閒狀態的時間百分比。 |
wa | 顯示了IO等待所佔用的CPU時間百分比。wa值越高，說明IO等待越嚴重，根據經驗，wa的參考值爲20%，如果wa超過20%，說明IO等待嚴重，引起IO等待的原因可能是磁盤大量隨機讀寫造成的，也可能是磁盤或者磁盤控制器的帶寬瓶頸造成的（主要是塊操作）。 |
綜上所述，在對CPU的評估中，需要重點注意的是procs項r列的值和CPU項中us、sy和id列的值。
1.2
sar命令
檢查CPU性能的第二個工具是sar，sar功能很強大，可以對系統的每個方面進行單獨的統計，但是使用sar命令會增加系統開銷，不過這些開銷是可以評估的，對系統的統計結果不會有很大影響。
下面是sar命令對某個系統的CPU統計輸出：
[root@centos6 ~]# # sar -u 3 5
Linux 2.6.9-42.ELsmp (webserver) 11/28/2008 _i686_ (8 CPU)
11:41:24 AM CPU %user %nice %system %iowait %steal %idle
11:41:27 AM all 0.88 0.00 0.29 0.00 0.00 98.83
11:41:30 AM all 0.13 0.00 0.17 0.21 0.00 99.50
11:41:33 AM all 0.04 0.00 0.04 0.00 0.00 99.92
11:41:36 AM all 0.29 0.00 0.13 0.00 0.00 99.58
11:41:39 AM all 0.38 0.00 0.17 0.04 0.00 99.41
Average: all 0.34 0.00 0.16 0.05 0.00 99.45
對上面每項的輸出解釋如下：
| %user | 顯示了用戶進程消耗的CPU 時間百分比。 |
| %nice | 顯示了運行正常進程所消耗的CPU 時間百分比。 |
| %system | 顯示了系統進程消耗的CPU時間百分比。 |
| %iowait | 顯示了IO等待所佔用的CPU時間百分比 |
| %stea | 顯示了在內存相對緊張的環境下pagein強制對不同的頁面進行的steal操作 。 |
| %idle | 顯示了CPU處在空閒狀態的時間百分比。 |
這個輸出是對系統整體CPU使用狀況的統計，每項的輸出都非常直觀，並且最後一行Average是個彙總行，是上面統計信息的一個平均值。
需要注意的一點是：第一行的統計信息中包含了sar本身的統計消耗，所以%user列的值會偏高一點，不過，這不會對統計結果產生多大影響。
在一個多CPU的系統中，如果程序使用了單線程，會出現這麼一個現象，CPU的整體使用率不高，但是系統應用卻響應緩慢，這可能是由於程序使用單線程的原因，單線程只使用一個CPU，導致這個CPU佔用率爲100%，無法處理其它請求，而其它的CPU卻閒置，這就導致 了整體CPU使用率不高，而應用緩慢 現象的發生 。
針對這個問題，可以對系統的每個CPU分開查詢，統計每個CPU的使用情況：
[root@centos6 ~]# sar -P 0 3 5
Linux 2.6.9-42.ELsmp (webserver) 11/29/2008 _i686_ (8 CPU)
06:29:33 PM CPU %user %nice %system %iowait %steal %idle
06:29:36 PM 0 3.00 0.00 0.33 0.00 0.00 96.67
06:29:39 PM 0 0.67 0.00 0.33 0.00 0.00 99.00
06:29:42 PM 0 0.00 0.00 0.33 0.00 0.00 99.67
06:29:45 PM 0 0.67 0.00 0.33 0.00 0.00 99.00
06:29:48 PM 0 1.00 0.00 0.33 0.33 0.00 98.34
Average: 0 1.07 0.00 0.33 0.07 0.00 98.53
這個輸出是對系統的第一顆CPU的信息統計，需要注意的是，sar中對CPU的計數是從0開始的，因此，
“sar -P 0 3 5”表示對系統的第一顆CPU進行信息統計
“sar -P 4 3
5”則表示對系統的第五顆CPU進行統計。依次類推。可以看出，上面的系統有八顆CPU。
1.3
iostat命令
iostat指令主要用於統計磁盤IO狀態，但是也能查看CPU的使用信息，它的侷限性是隻能顯示系統所有CPU的平均信息，看下面的一個輸出：
[root@centos6 ~]# iostat -c
Linux 2.6.9-42.ELsmp (webserver) 11/29/2008 _i686_ (8 CPU)
avg-cpu: %user %nice %system %iowait %steal %idle
2.52 0.00 0.30 0.24 0.00 96.96
使用了“-c”參數，只顯示系統CPU的統計信息，輸出中每項代表的含義與sar命令的輸出項完全相同，不再詳述。
1.4
uptime命令
uptime是監控系統性能最常用的一個命令，主要用來統計系統當前的運行狀況，輸出的信息依次爲：系統現在的時間、系統從上次開機到現在運行了多長時間、系統目前有多少登陸用戶、系統在一分鐘內、五分鐘內、十五分鐘內的平均負載。看下面的一個輸出：
[root@centos6 ~]# uptime
18:52:11 up 27 days, 19:44, 2 users, load average: 0.12, 0.08, 0.08
這裏需要注意的是load
average這個輸出值，這三個值的大小一般不能大於系統CPU的個數，例如，本輸出中系統有8個CPU,如果load
average的三個值長期大於8時，說明CPU很繁忙，負載很高，可能會影響系統性能，但是偶爾大於8時，倒不用擔心，一般不會影響系統性能。相反，如果load
average的輸出值小於CPU的個數，則表示CPU還有空閒的時間片，比如本例中的輸出，CPU是非常空閒的。
1.5
本節小結
上面介紹了檢查CPU使用狀況的四個命令，通過這些命令需要了解的是：系統CPU是否出現性能瓶頸，也就是說，以上這些命令只能查看CPU是否繁忙，負載是否過大，但是無法知道CPU爲何負載過大，因而，判斷系統CPU出現問題後，要結合top、ps等命令進一步檢查是由那些進程導致CPU負載過大的。引起CPU資源緊缺的原因可能是應用程序不合理造成的，也可能是硬件資源匱乏引起的，所以，要具體問題具體分析，或者優化應用程序，或者增加系統CPU資源。
=========================================================================================
2 內存性能評估
內存的管理和優化是系統性能優化的一個重要部分，內存資源的充足與否直接影響應用系統的使用性能，在進行內存優化之前，一定要熟悉linux的內存管理機制，這一點我們在前面的章節已經有深入講述，本節的重點是如何通過系統命令監控linux系統的內存使用狀況。
2.1
free 命令
free是監控linux內存使用狀況最常用的指令，看下面的一個輸出：
[root@centos6 ~]# free -m
total used free shared buffers cached
Mem: 8111 7185 925 0 243 6299
-/+ buffers/cache: 643 7468
Swap: 8189 0 8189
“free –m”表示以M爲單位查看內存使用情況，在這個輸出中，我們重點關注的應該是free列與cached列的輸出值，由輸出可知，此係統共8G內存，系統空閒內存還有925M，其中，Buffer Cache佔用了243M，Page Cache佔用了6299M，由此可知系統緩存了很多的文件和目錄，而對於應用程序來說，可以使用的內存還有7468M，當然這個7468M包含了Buffer Cache和Page Cache的值。在swap項可以看出，交換分區還未使用。所以從應用的角度來說，此係統內存資源還非常充足。
經驗公式：
應用程序可用內存/系統物理內存>70%時，表示系統內存資源非常充足，不影響系統性能，
應用程序可用內存/系統物理內存<20%時，表示系統內存資源緊缺，需要增加系統內存，
20%<應用程序可用內存/系統物理內存<70%時，表示系統內存資源基本能滿足應用需求，暫時不影響系統性能。
free命令還可以適時的監控內存的使用狀況，使用“-s”參數可以在指定的時間段內不間斷的監控內存的使用情況：
下面是對這些數值的解釋：
total:總計物理內存的大小。
used:已使用多大。
free:可用有多少。
Shared:多個進程共享的內存總額。
Buffers/cached:磁盤緩存的大小。
第三行(-/+ buffers/cached):
used:已使用多大。
free:可用有多少。
第四行就不多解釋了。
區別：第二行(mem)的used/free與第三行(-/+ buffers/cache) used/free的區別。 這兩個的區別在於使用的角度來看，第一行是從OS的角度來看，因爲對於OS，buffers/cached 都是屬於被使用，所以他的可用內存是16176KB,已用內存是3250004KB,其中包括，內核（OS）使用+Application(X, oracle,etc)使用的+buffers+cached.
第三行所指的是從應用程序角度來看，對於應用程序來說，buffers/cached 是等於可用的，因爲buffer/cached是爲了提高文件讀取的性能，當應用程序需在用到內存的時候，buffer/cached會很快地被回收。
所以從應用程序的角度來說，可用內存=系統free memory+buffers+cached。
如上例：
2795064=16176+110652+2668236
[root@centos6 ~]# free -b -s 5
total used free shared buffers cached
Mem: 8505901056 7528706048 977195008 0 260112384 6601158656
-/+ buffers/cache: 667435008 7838466048
Swap: 8587149312 163840 8586985472
total used free shared buffers cached
Mem: 8505901056 7526936576 978964480 0 260128768 6601142272
-/+ buffers/cache: 665665536 7840235520
Swap: 8587149312 163840 8586985472
total used free shared buffers cached
Mem: 8505901056 7523987456 981913600 0 260141056 6601129984
-/+ buffers/cache: 662716416 7843184640
Swap: 8587149312 163840 8586985472
其中，“-b”表示以千字節(也就是1024字節爲單位)來顯示內存使用情況。
2.2
通過watch與free相結合動態監控內存狀況
watch是一個非常有用的命令，幾乎每個linux發行版都帶有這個工具，通過watch，可以動態的監控命令的運行結果，省去手動執行的麻煩。
可以在watch後面跟上需要運行的命令，watch就會自動重複去運行這個命令，默認是2秒鐘執行一次，並把執行的結果更新在屏幕上。例如：
[root@centos6 ~]# watch -n 3 -d free
Every 3.0s: free Sun Nov 30 16:23:20 2008
total used free shared buffers cached
Mem: 8306544 7349548 956996 0 203296 6500024
-/+ buffers/cache: 646228 7660316
Swap: 8385888 160 8385728
其中，“-n”指定重複執行的時間，“-d”表示高亮顯示變動。
2.3
vmstat命令監控內存
vmstat命令在監控系統內存方面功能強大，請看下面的一個輸出：
procs -----------memory---------- ---swap-- -----io---- --system-- ----cpu----
r b swpd free buff cache si so bi bo in cs us sy id wa
0 0 906440 22796 155616 1325496 340 180 2 4 1 4 80 0 10 10
0 0 906440 42796 155616 1325496 320 289 0 54 1095 287 70 15 0 15
0 0 906440 42884 155624 1325748 236 387 2 102 1064 276 78 2 5 15
對於內存的監控，在vmstat中重點關注的是swpd、si和so行，從這個輸出可以看出，此係統內存資源緊缺，swpd佔用了900M左右內存，si和so佔用很大，而由於系統內存的緊缺，導致出現15%左右的系統等待，此時增加系統的內存是必須要做的。
2.4
sar -r命令組合
sar命令也可以監控linux的內存使用狀況，可以通過“sar
–r”組合查看系統內存和交換空間的使用率。請看下面的一個輸出：
[root@centos6 ~]# sar -r 2 3
Linux 2.6.9-42.ELsmp (webserver) 11/30/2008 _i686_ (8 CPU)
09:57:33 PM kbmemfree kbmemused %memused kbbuffers kbcached kbcommit %commit
09:57:35 PM 897988 7408556 89.19 249428 6496532 786556 4.71
09:57:37 PM 898564 7407980 89.18 249428 6496532 784276 4.70
09:57:39 PM 899196 7407348 89.17 249440 6496520 782132 4.69
Average: 898583 7407961 89.18 249432 6496528 784321 4.70
其中：
Kbmemfree:表示空閒物理內存大小;
kbmemused:表示已使用的物理內存空間大小;
%memused:表示已使用內存佔總內存大小的百分比;
kbbuffers和kbcached分別表示Buffer Cache和Page Cache的大小，
kbcommit和%commit分別表示應用程序當前使用的內存大小和使用百分比。
可以看出sar的輸出其實與free的輸出完全對應，不過sar更加人性化，不但給出了內存使用量，還給出了內存使用的百分比以及統計的平均值。從%commit項可知，此係統目前內存資源充足。
2.5
本節小結
上面介紹了內存監控常用的幾個指令以及一些經驗規則，其實現在的系統在內存方面出現的瓶頸已經很少，因爲內存價格很低，充足的內存已經完全能滿足應用程序和系統本身的需要，如果系統在內存方面出現瓶頸，很大的可能是應用程序本身的問題造成的。
=========================================================================================
3
磁盤I/O性能評估
在對磁盤I/O性能做評估之前，必須知道的幾個方面是：
1、熟悉RAID存儲方式，可以根據應用的不同，選擇不同的RAID方式，例如，如果一個應用經常有大量的讀操作，可以選擇RAID5方式構建磁盤陣列存儲數據，如果應用有大量的、頻繁的寫操作，可以選擇raid0存取方式，如果應用對數據安全要求很高，同時對讀寫也有要求的話，可以考慮raid01存取方式等等。
2、儘可能用內存的讀寫代替直接磁盤I/O，使頻繁訪問的文件或數據放入內存中進行操作處理，因爲內存讀寫操作比直接磁盤讀寫的效率要高千倍。
3、將經常進行讀寫的文件與長期不變的文件獨立出來，分別放置到不同的磁盤設備上。
對於寫操作頻繁的數據，可以考慮使用裸設備代替文件系統。這裏簡要講述下文件系統與裸設備的對比：
使用裸設備的優點有：
1、數據可以直接讀寫，不需要經過操作系統級的緩存，節省了內存資源，避免了內存資源爭用。
2、避免了文件系統級的維護開銷，比如文件系統需要維護超級塊、I-node等。
3、避免了操作系統的cache預讀功能，減少了I/O請求。
使用裸設備的缺點是：
1、數據管理、空間管理不靈活，需要很專業的人來操作。
2、其實裸設備的優點就是文件系統的缺點，反之也是如此，這就需要我們做出合理的規劃和衡量，根據應用的需求，做出對應的策略。
下面接着介紹對磁盤IO的評估標準。
3.1
sar -d命令組合
通過“sar –d”組合，可以對系統的磁盤IO做一個基本的統計，例如下面的一個輸出：
[root@centos6 ~]# sar -d 2 3
Linux 2.6.32.12-0.7-default (ztesuse) 07/30/13 _x86_64_
22:35:26 DEV tps rd_sec/s wr_sec/s
avgrq-sz avgqu-sz await svctm %util
22:35:28 dev8-0 3.30 0.00 52.75 16.00 0.01 2.67 2.67 0.88
22:35:28 DEV tps rd_sec/s wr_sec/s avgrq-sz
avgqu-sz await svctm %util
22:35:30
dev8-0 6.70 0.00 80.45 12.00 0.03 4.67 3.67 2.46
22:35:30 DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
22:35:32
dev8-0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
Average: DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
Average:
dev8-0 3.14 0.00 41.81 13.33 0.01 4.00 3.33 1.05
對上面每項的輸出解釋如下：
| DEV | 表示磁盤設備名稱。 |
| tps | 表示每秒到物理磁盤的傳送數，也就是每秒的I/O流量。一個傳送就是一個I/O請求，多個邏輯請求可以被合併爲一個物理I/O請求。 |
| rd_sec/s | 表示每秒從設備讀取的扇區數（1扇區=512字節）。 |
| wr_sec/s | 表示每秒寫入設備的扇區數目。 |
| avgrq-sz | 表示平均每次設備I/O操作的數據大小（以扇區爲單位）。 |
| avgqu-sz | 表示平均I/O隊列長度。 |
| await | 表示平均每次設備I/O操作的等待時間（以毫秒爲單位）。 |
| svctm | 表示平均每次設備I/O操作的服務時間（以毫秒爲單位）。 |
| %util | 表示一秒中有百分之幾的時間用於I/O操作。 |
Linux中I/O請求系統與現實生活中超市購物排隊系統有很多類似的地方，通過對超市購物排隊系統的理解，可以很快掌握linux中I/O運行機制。比如：
...avgrq-sz類似與超市排隊中每人所買東西的多少。
...avgqu-sz類似與超市排隊中單位時間內平均排隊的人數。
...await類似與超市排隊中每人的等待時間。
...svctm類似與超市排隊中收銀員的收款速度。
...%util類似與超市收銀臺前有人排隊的時間比例。
對以磁盤IO性能，一般有如下評判標準：
正常情況下svctm應該是小於await值的，而svctm的大小和磁盤性能有關，CPU、內存的負荷也會對svctm值造成影響，過多的請求也會間接的導致svctm值的增加。
await值的大小一般取決與svctm的值和I/O隊列長度以及I/O請求模式，如果svctm的值與await很接近，表示幾乎沒有I/O等待，磁盤性能很好，如果await的值遠高於svctm的值，則表示I/O隊列等待太長，系統上運行的應用程序將變慢，此時可以通過更換更快的硬盤來解決問題。
%util項的值也是衡量磁盤I/O的一個重要指標，如果%util接近100%，表示磁盤產生的I/O請求太多，I/O系統已經滿負荷的在工作，該磁盤可能存在瓶頸。長期下去，勢必影響系統的性能，可以通過優化程序或者通過更換更高、更快的磁盤來解決此問題。
3.2
iostat –d命令組合
通過“iostat
–d”命令組合也可以查看系統磁盤的使用狀況，請看如下輸出：
[root@centos6 ~]# iostat -d 2 3
Linux 2.6.9-42.ELsmp (webserver) 12/01/2008 _i686_ (8 CPU)
Device: tps Blk_read/s Blk_wrtn/s Blk_read Blk_wrtn
sda 1.87 2.58 114.12 6479462 286537372
Device: tps Blk_read/s Blk_wrtn/s Blk_read Blk_wrtn
sda 0.00 0.00 0.00 0 0
Device: tps Blk_read/s Blk_wrtn/s Blk_read Blk_wrtn
sda 1.00 0.00 12.00 0 24
對上面每項的輸出解釋如下：
Blk_read/s表示每秒讀取的數據塊數。
Blk_wrtn/s表示每秒寫入的數據塊數。
Blk_read表示讀取的所有塊數
Blk_wrtn表示寫入的所有塊數。
這裏需要注意的一點是：上面輸出的第一項是系統從啓動以來到統計時的所有傳輸信息，從第二次輸出的數據才代表在檢測的時間段內系統的傳輸值。
可以通過Blk_read/s和Blk_wrtn/s的值對磁盤的讀寫性能有一個基本的瞭解，如果Blk_wrtn/s值很大，表示磁盤的寫操作很頻繁，可以考慮優化磁盤或者優化程序，如果Blk_read/s值很大，表示磁盤直接讀取操作很多，可以將讀取的數據放入內存中進行操作。對於這兩個選項的值沒有一個固定的大小，根據系統應用的不同，會有不同的值，但是有一個規則還是可以遵循的：長期的、超大的數據讀寫，肯定是不正常的，這種情況一定會影響系統性能。
“iostat
–x”組合還提供了對每個磁盤的單獨統計，如果不指定磁盤，默認是對所有磁盤進行統計，請看下面的一個輸出：
[root@centos6 ~]# iostat -x /dev/sda 2 3
Linux 2.6.9-42.ELsmp (webserver) 12/01/2008 _i686_ (8 CPU)
avg-cpu: %user %nice %system %iowait %steal %idle
2.45 0.00 0.30 0.24 0.00 97.03
Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s avgrq-sz avgqu-sz await svctm %util
sda 0.01 12.48 0.10 1.78 2.58 114.03 62.33 0.07 38.39 1.30 0.24
avg-cpu: %user %nice %system %iowait %steal %idle
3.97 0.00 1.83 8.19 0.00 86.14
Device:rrqm/s wrqm/s r/s w/s rsec/s wsec/s avgrq-sz avgqu-sz await svctm %util
sda 0.00 195.00 0.00 18.00 0.00 1704.00 94.67 0.04 2.50 0.11 0.20
avg-cpu: %user %nice %system %iowait %steal %idle
4.04 0.00 1.83 8.01 0.00 86.18
Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s avgrq-sz avgqu-sz await svctm %util
=========================================================================================
4.網絡性能評估
網絡性能的好壞直接影響應用程序對外提供服務的穩定性和可靠性，監控網絡性能，可以從以下幾個方面進行管理和優化。
4.1 通過ping命令檢測網絡的連通性
如果發現網絡反應
緩慢，或者連接中斷，可以通過ping來測試網絡的連通情況，請看下面的一個輸出：
[root@centos6 ~]# ping 10.10.1.254
PING 10.10.1.254 (10.10.1.254) 56(84) bytes of
data.
64 bytes from 10.10.1.254:
icmp_seq=0 ttl=64 time=0.235 ms
64 bytes
from 10.10.1.254: icmp_seq=1 ttl=64 time=0.164 ms
64 bytes from 10.10.1.254: icmp_seq=2 ttl=64 time=0.210
ms
64 bytes from 10.10.1.254: icmp_seq=3
ttl=64 time=0.178 ms
64 bytes from
10.10.1.254: icmp_seq=4 ttl=64 time=0.525 ms
64 bytes from 10.10.1.254: icmp_seq=5 ttl=64 time=0.571
ms
64 bytes from 10.10.1.254: icmp_seq=6
ttl=64 time=0.220 ms
--- 10.10.1.254
ping statistics ---
7 packets
transmitted, 7 received, 0% packet loss, time 6000ms
rtt min/avg/max/mdev = 0.164/0.300/0.571/0.159 ms, pipe
2
在這個輸出中，time值情顯示了兩臺主機之間的網絡延時況，如果此值很大，則表示網絡的延時很大，單位爲毫秒。在這個輸出的最後，是對上面輸出信息的一個總結，packet
loss表示網絡的丟包率，此值越小，表示網絡的質量越高。
4.2
通過netstat –i組合檢測網絡接口狀況
netstat命令提供了網絡接口的詳細信息，請看下面的輸出：
[root@centos6 ~]# netstat -i
Kernel Interface table
Iface MTU Met RX-OK RX-ERR RX-DRP RX-OVR TX-OK TX-ERR TX-DRP TX-OVR Flg
eth0
1500 0 1313129253 0 0 0 1320686497 0 0 0 BMRU
eth1 1500 0 494902025 0 0 0 292358810 0 0 0 BMRU
lo 16436 0 41901601 0 0 0 41901601 0 0 0 BLRU
對上面每項的輸出解釋如下：
| Iface | 表示網絡設備的接口名稱 |
| MTU | 表示最大傳輸單元，單位字節。 |
| RX-OK/TX-OK | 表示已經準確無誤的接收/發送了多少數據包。 |
| RX-ERR/TX-ERR | 表示接收/發送數據包時產生了多少錯誤。 |
| RX-DRP/TX-DRP | 表示接收/發送數據包時丟棄了多少數據包。 |
| RX-OVR/TX-OVR | 表示由於誤差而遺失了多少數據包。 |
Flg表示接口標記，其中：
L：表示該接口是個迴環設備。
B：表示設置了廣播地址。
M：表示接收所有數據包。
R：表示接口正在運行。
U：表示接口處於活動狀態。
O：表示在該接口上禁用arp。
P：表示一個點到點的連接。
正常情況下，RX-ERR/TX-ERR、RX-DRP/TX-DRP和RX-OVR/TX-OVR的值都應該爲0，如果這幾個選項的值不爲0，並且很大，那麼網絡質量肯定有問題，網絡傳輸性能也一定會下降。
當網絡傳輸存在問題是，可以檢測網卡設備是否存在故障，如果可能，可以升級爲千兆網卡或者光纖網絡，還可以檢查網絡部署環境是否合理。
4.3 通過netstat –r組合檢測系統的路由表信息
在網絡不通，或者網絡異常時，首先想到的就是檢查系統的路由表信息，“netstat
–r”的輸出結果與route命令的輸出完全相同，請看下面的一個實例：
[root@centos6 ~]# netstat -r
Kernel IP routing table
Destination Gateway Genmask Flags
MSS Window irtt Iface
10.10.1.0
* 255.255.255.0 U 0 0 0 eth0
192.168.200.0 * 255.255.255.0
U 0 0 0 eth1
169.254.0.0 * 255.255.0.0
U 0 0 0 eth1
default 10.10.1.254 0.0.0.0
UG 0 0 0 eth0
關於輸出中每項的具體含義，已經在前面章節進行過詳細介紹，這裏不再多講，這裏我們重點關注的是default行對應的值，default項表示系統的默認路由，對應的網絡接口爲eth0。
4.4 通過sar –n組合顯示系統的網絡運行狀態
sar提供四種不同的選項來顯示網絡統計信息，通過“-n”選項可以指定4個不同類型的開關：DEV、EDEV、SOCK和FULL。DEV顯示網絡接口信息，EDEV顯示關於網絡錯誤的統計數據，SOCK顯示套接字信息，FULL顯示所有三個開關。請看下面的一個輸出：
[root@centos6 ~]# sar -n DEV 2 3
Linux 2.6.9-42.ELsmp (webserver) 12/01/2008
_i686_ (8 CPU)
02:22:31 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s
02:22:33 PM lo 31.34 31.34 37.53 37.53 0.00 0.00 0.00
02:22:33 PM eth0 199.50 279.60 17.29 344.12 0.00 0.00 0.00
02:22:33 PM eth1 5.47 4.98 7.03 0.36 0.00 0.00 0.00
02:22:33 PM sit0 0.00 0.00 0.00 0.00 0.00 0.00 0.00
02:22:33 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s
02:22:35 PM lo 67.66 67.66 74.34 74.34 0.00 0.00 0.00
02:22:35 PM eth0 159.70 222.39 19.74
217.16 0.00 0.00 0.00
02:22:35 PM eth1 3.48 4.48 0.44 0.51 0.00 0.00 0.00
02:22:35 PM sit0 0.00 0.00 0.00 0.00 0.00 0.00 0.00
02:22:35 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s
02:22:37 PM lo 4.52 4.52 9.25 9.25 0.00 0.00 0.00
02:22:37 PM eth0 102.51 133.67 20.67 116.14 0.00 0.00 0.00
02:22:37 PM eth1 27.14 67.34 2.42 89.26 0.00 0.00 0.00
02:22:37 PM sit0 0.00 0.00 0.00 0.00 0.00 0.00 0.00
Average: IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s
Average: lo 34.61 34.61 40.48 40.48 0.00 0.00 0.00
Average: eth0 154.08 212.15 19.23 226.17 0.00 0.00 0.00
Average: eth1 11.98 25.46 3.30 29.85 0.00 0.00 0.00
Average: sit0 0.00 0.00 0.00 0.00 0.00 0.00 0.00
對上面每項的輸出解釋如下：
| IFACE | 表示網絡接口設備。 |
| rxpck/s | 表示每秒鐘接收的數據包大小。 |
| txpck/s | 表示每秒鐘發送的數據包大小。 |
| rxkB/s | 表示每秒鐘接收的字節數。 |
| txkB/s | 表示每秒鐘發送的字節數。 |
| rxcmp/s | 表示每秒鐘接收的壓縮數據包。 |
| txcmp/s | 表示每秒鐘發送的壓縮數據包。 |
| rxmcst/s | 表示每秒鐘接收的多播數據包。 |
通過“sar
–n”的輸出，可以清楚的顯示網絡接口發送、接收數據的統計信息。此外還可以通過“sar -n EDEV 2
3”來統計網絡錯誤信息等。
4.5
小結
本節通過幾個常用的網絡命令介紹了對網絡性能的評估，事實上，網絡問題是簡單而且容易處理的，只要我們根據上面給出的命令，一般都能迅速定位問題。解決問題的方法一般是增加網絡帶寬，或者優化網絡部署環境。
除了上面介紹的幾個命令外，排查網絡問題經常用到的命令還有traceroute，主要用於跟蹤數據包的傳輸路徑，還有nslookup命令，主要用於判斷DNS解析信息。