一、uptime命令
# uptime
[root@centos7 ~]# uptime 14:17:46 up 3:58, 3 users, load average: 0.00, 0.01, 0.05
這個命令可以快速查看機器的負載情況。在Linux系統中，這些數據表示等待CPU資源的進程和阻塞在不可中斷IO進程（進程狀態爲D）的數量。這些數據可以讓我們對系統資源使用有一個宏觀的瞭解。
命令的輸出分別表示1分鐘、5分鐘、15分鐘的平均負載情況。通過這三個數據，可以瞭解服務器負載是在趨於緊張還是趨於緩解。如果1分鐘平均負載很高，而15分鐘平均負載很低，說明服務器正在命令高負載情況，需要進一步排查CPU資源都消耗在了哪裏。反之，如果15分鐘平均負載很高，1分鐘平均負載較低，則有可能是CPU資源緊張時刻已經過去。
上面例子中的輸出，可以看見最近1分鐘的平均負載非常高，且遠高於最近15分鐘負載，因此我們需要繼續排查當前系統中有什麼進程消耗了大量的資源。可以通過下文將會介紹的vmstat、mpstat等命令進一步排查。
二、dmesg命令
# dmesg | tail
[root@centos7 ~]# dmesg |tail [ 23.844720] IPv6: ADDRCONF(NETDEV_UP): eth0: link is not ready [ 23.848463] e1000: eth0 NIC Link is Up 1000 Mbps Full Duplex, Flow Control: None [ 23.857935] IPv6: ADDRCONF(NETDEV_UP): eth1: link is not ready [ 23.861629] e1000: eth1 NIC Link is Up 1000 Mbps Full Duplex, Flow Control: None [ 1248.092396] ISO 9660 Extensions: Microsoft Joliet Level 3 [ 1248.112365] ISO 9660 Extensions: RRIP_1991A [ 2368.001986] bridge: automatic filtering via arp/ip/ip6tables has been deprecated. Update your scripts to load br_netfilter if you need this. [ 2368.005495] Bridge firewalling registered [ 2368.027379] nf_conntrack version 0.5.0 (7812 buckets, 31248 max) [ 2368.237314] IPv6: ADDRCONF(NETDEV_UP): docker0: link is not ready
該命令會輸出系統日誌的最後10行。示例中的輸出，可以看見一次內核的oom kill和一次TCP丟包。這些日誌可以幫助排查性能問題。千萬不要忘了這一步。
三、vmstat命令
# vmstat 1
[root@centos7 ~]# vmstat 1 procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu----- r b swpd free buff cache si so bi bo in cs us sy id wa st 2 0 0 467048 948 417452 0 0 14 14 37 78 0 0 99 0 0 0 0 0 467032 948 417452 0 0 0 0 51 111 0 0 100 0 0 0 0 0 467032 948 417452 0 0 0 0 59 114 0 0 100 0 0 0 0 0 467032 948 417452 0 0 0 0 48 99 0 1 99 0 0 0 0 0 467032 948 417452 0 0 0 33 58 119 0 0 100 0 0 ^C
vmstat(8) 命令，每行會輸出一些系統核心指標，這些指標可以讓我們更詳細的瞭解系統狀態。後面跟的參數1，表示每秒輸出一次統計信息，表頭提示了每一列的含義，這幾介紹一些和性能調優相關的列：
r：等待在CPU資源的進程數。這個數據比平均負載更加能夠體現CPU負載情況，數據中不包含等待IO的進程。如果這個數值大於機器CPU核數，那麼機器的CPU資源已經飽和。
free：系統可用內存數（以千字節爲單位），如果剩餘內存不足，也會導致系統性能問題。下文介紹到的free命令，可以更詳細的瞭解系統內存的使用情況。
si，so：交換區寫入和讀取的數量。如果這個數據不爲0，說明系統已經在使用交換區（swap），機器物理內存已經不足。
us, sy, id, wa, st：這些都代表了CPU時間的消耗，它們分別表示用戶時間（user）、系統（內核）時間（sys）、空閒時間（idle）、IO等待時間（wait）和被偷走的時間（stolen，一般被其他虛擬機消耗）。
上述這些CPU時間，可以讓我們很快了解CPU是否出於繁忙狀態。一般情況下，如果用戶時間和系統時間相加非常大，CPU出於忙於執行指令。如果IO等待時間很長，那麼系統的瓶頸可能在磁盤IO。
示例命令的輸出可以看見，大量CPU時間消耗在用戶態，也就是用戶應用程序消耗了CPU時間。這不一定是性能問題，需要結合r隊列，一起分析。
四、mpstat命令
1、下載此命令
[root@centos7 ~]# yum -y install sysstat
2、命令用法展示
# mpstat -P ALL 1
[root@centos7 ~]# mpstat -P ALL 1 Linux 3.10.0-514.el7.x86_64 (centos7) 05/15/2018 _x86_64_ (1 CPU) 02:23:08 PM CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle 02:23:09 PM all 0.00 0.00 0.99 0.00 0.00 0.00 0.00 0.00 0.00 99.01 02:23:09 PM 0 0.00 0.00 0.99 0.00 0.00 0.00 0.00 0.00 0.00 99.01 02:23:09 PM CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle 02:23:10 PM all 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 100.00 02:23:10 PM 0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 100.00 02:23:10 PM CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle 02:23:11 PM all 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 100.00 02:23:11 PM 0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 100.00
該命令可以顯示每個CPU的佔用情況，如果有一個CPU佔用率特別高，那麼有可能是一個單線程應用程序引起的。
五、pidstat命令
# pidstat 1
[root@centos7 ~]# pidstat 1 Linux 3.10.0-514.el7.x86_64 (centos7) 05/15/2018 _x86_64_ (1 CPU) 02:23:40 PM UID PID %usr %system %guest %CPU CPU Command 02:23:41 PM 0 14039 0.00 0.98 0.00 0.98 0 pidstat 02:23:41 PM UID PID %usr %system %guest %CPU CPU Command 02:23:42 PM 0 14039 0.00 1.01 0.00 1.01 0 pidstat 02:23:42 PM UID PID %usr %system %guest %CPU CPU Command 02:23:43 PM UID PID %usr %system %guest %CPU CPU Command 02:23:44 PM 0 592 1.03 0.00 0.00 1.03 0 vmtoolsd 02:23:44 PM 0 14039 0.00 1.03 0.00 1.03 0 pidstat 02:23:44 PM UID PID %usr %system %guest %CPU CPU Command 02:23:45 PM 0 2178 0.00 1.00 0.00 1.00 0 kworker/0:1 02:23:45 PM 0 14039 0.00 1.00 0.00 1.00 0 pidstat 02:23:45 PM UID PID %usr %system %guest %CPU CPU Command 02:23:46 PM 0 14039 1.01 1.01 0.00 2.02 0 pidstat 02:23:46 PM UID PID %usr %system %guest %CPU CPU Command 02:23:47 PM 0 14039 0.00 0.99 0.00 0.99 0 pidstat 02:23:47 PM UID PID %usr %system %guest %CPU CPU Command 02:23:48 PM 0 894 1.02 0.00 0.00 1.02 0 tuned
pidstat命令輸出進程的CPU佔用率，該命令會持續輸出，並且不會覆蓋之前的數據，可以方便觀察系統動態。如上的輸出，可以看見兩個JAVA進程佔用了將近1600%的CPU時間，既消耗了大約16個CPU核心的運算資源。
六、iostat命令
# iostat -xz 1
[root@centos7 ~]# iostat -xz 1 Linux 3.10.0-514.el7.x86_64 (centos7) 05/15/2018 _x86_64_ (1 CPU) avg-cpu: %user %nice %system %iowait %steal %idle 0.17 0.01 0.29 0.12 0.00 99.41 Device: rrqm/s wrqm/s r/s w/s rkB/s wkB/s avgrq-sz avgqu-sz await r_await w_await svctm %util sda 0.00 0.17 0.69 0.31 13.46 14.49 56.25 0.04 35.65 5.14 104.52 3.59 0.36 scd0 0.00 0.00 0.10 0.00 0.40 0.00 7.99 0.00 1.32 1.32 0.00 1.31 0.01 dm-0 0.00 0.00 0.54 0.48 12.99 14.35 53.99 0.06 55.24 4.36 112.41 2.38 0.24 dm-1 0.00 0.00 0.01 0.00 0.07 0.00 16.69 0.00 0.23 0.23 0.00 0.23 0.00 avg-cpu: %user %nice %system %iowait %steal %idle 0.00 0.00 0.00 0.00 0.00 100.00 Device: rrqm/s wrqm/s r/s w/s rkB/s wkB/s avgrq-sz avgqu-sz await r_await w_await svctm %util avg-cpu: %user %nice %system %iowait %steal %idle 0.00 0.00 0.99 0.00 0.00 99.01 Device: rrqm/s wrqm/s r/s w/s rkB/s wkB/s avgrq-sz avgqu-sz await r_await w_await svctm %util avg-cpu: %user %nice %system %iowait %steal %idle 0.00 0.00 0.00 0.00 0.00 100.00
r/s, w/s, rkB/s, wkB/s：分別表示每秒讀寫次數和每秒讀寫數據量（千字節）。讀寫量過大，可能會引起性能問題。
await：IO操作的平均等待時間，單位是毫秒。這是應用程序在和磁盤交互時，需要消耗的時間，包括IO等待和實際操作的耗時。如果這個數值過大，可能是硬件設備遇到了瓶頸或者出現故障。
avgqu-sz：向設備發出的請求平均數量。如果這個數值大於1，可能是硬件設備已經飽和（部分前端硬件設備支持並行寫入）。
%util：設備利用率。這個數值表示設備的繁忙程度，經驗值是如果超過60，可能會影響IO性能（可以參照IO操作平均等待時間）。如果到達100%，說明硬件設備已經飽和。
如果顯示的是邏輯設備的數據，那麼設備利用率不代表後端實際的硬件設備已經飽和。值得注意的是，即使IO性能不理想，也不一定意味這應用程序性能會不好，可以利用諸如預讀取、寫緩存等策略提升應用性能。
七、free命令
# free -m
[root@centos7 ~]# free -m total used free shared buff/cache available Mem: 976 112 451 18 412 648 Swap: 2047 0 2047
free命令可以查看系統內存的使用情況，-m參數表示按照兆字節展示。最後兩列分別表示用於IO緩存的內存數，和用於文件系統頁緩存的內存數。需要注意的是，第二行-/+ buffers/cache，看上去緩存佔用了大量內存空間。
這是Linux系統的內存使用策略，儘可能的利用內存，如果應用程序需要內存，這部分內存會立即被回收並分配給應用程序。因此，這部分內存一般也被當成是可用內存。
如果可用內存非常少，系統可能會動用交換區（如果配置了的話），這樣會增加IO開銷（可以在iostat命令中提現），降低系統性能。
八、sar命令
1、# sar -n DEV 1
[root@centos7 ~]# sar -n DEV 1 Linux 3.10.0-514.el7.x86_64 (centos7) 05/15/2018 _x86_64_ (1 CPU) 02:25:38 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s 02:25:39 PM eth0 1.00 1.00 0.06 0.18 0.00 0.00 0.00 02:25:39 PM eth1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:39 PM lo 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:39 PM docker0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:39 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s 02:25:40 PM eth0 1.02 1.02 0.06 0.58 0.00 0.00 0.00 02:25:40 PM eth1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:40 PM lo 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:40 PM docker0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:40 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s 02:25:41 PM eth0 1.01 1.01 0.06 0.58 0.00 0.00 0.00 02:25:41 PM eth1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:41 PM lo 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:41 PM docker0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:41 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s 02:25:42 PM eth0 0.99 0.99 0.06 0.57 0.00 0.00 0.00 02:25:42 PM eth1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:42 PM lo 0.00 0.00 0.00 0.00 0.00 0.00 0.00 02:25:42 PM docker0 0.00 0.00 0.00 0.00 0.00 0.00 0.00
sar命令在這裏可以查看網絡設備的吞吐率。在排查性能問題時，可以通過網絡設備的吞吐量，判斷網絡設備是否已經飽和。如示例輸出中，eth0網卡設備，吞吐率大概在22 Mbytes/s，既176 Mbits/sec，沒有達到1Gbit/sec的硬件上限。
2、# sar -n TCP,ETCP 1
[root@centos7 ~]# sar -n TCP,ETCP 1 Linux 3.10.0-514.el7.x86_64 (centos7) 05/15/2018 _x86_64_ (1 CPU) 02:26:21 PM active/s passive/s iseg/s oseg/s 02:26:22 PM 0.00 0.00 1.01 1.01 02:26:21 PM atmptf/s estres/s retrans/s isegerr/s orsts/s 02:26:22 PM 0.00 0.00 0.00 0.00 0.00 02:26:22 PM active/s passive/s iseg/s oseg/s 02:26:23 PM 0.00 0.00 0.99 0.99 02:26:22 PM atmptf/s estres/s retrans/s isegerr/s orsts/s 02:26:23 PM 0.00 0.00 0.00 0.00 0.00 02:26:23 PM active/s passive/s iseg/s oseg/s 02:26:24 PM 0.00 0.00 1.01 1.01 02:26:23 PM atmptf/s estres/s retrans/s isegerr/s orsts/s 02:26:24 PM 0.00 0.00 0.00 0.00 0.00 02:26:24 PM active/s passive/s iseg/s oseg/s 02:26:25 PM 0.00 0.00 1.02 1.02
sar命令在這裏用於查看TCP連接狀態，其中包括：
active/s：每秒本地發起的TCP連接數，既通過connect調用創建的TCP連接；
passive/s：每秒遠程發起的TCP連接數，即通過accept調用創建的TCP連接；
retrans/s：每秒TCP重傳數量；
TCP連接數可以用來判斷性能問題是否由於建立了過多的連接，進一步可以判斷是主動發起的連接，還是被動接受的連接。TCP重傳可能是因爲網絡環境惡劣，或者服務器壓
九、top命令
# top
[root@centos7 ~]# top top - 14:28:13 up 4:08, 3 users, load average: 0.00, 0.01, 0.05 Tasks: 94 total, 1 running, 93 sleeping, 0 stopped, 0 zombie %Cpu(s): 0.2 us, 0.3 sy, 0.0 ni, 99.4 id, 0.1 wa, 0.0 hi, 0.0 si, 0.0 st KiB Mem : 999936 total, 463864 free, 115036 used, 421036 buff/cache KiB Swap: 2097148 total, 2097148 free, 0 used. 664372 avail Mem PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 2178 root 20 0 0 0 0 S 6.2 0.0 0:18.69 kworker/0:1 1 root 20 0 125160 3700 2416 S 0.0 0.4 0:01.68 systemd 2 root 20 0 0 0 0 S 0.0 0.0 0:00.00 kthreadd 3 root 20 0 0 0 0 S 0.0 0.0 0:00.73 ksoftirqd/0 6 root 20 0 0 0 0 S 0.0 0.0 0:00.90 kworker/u256:0 7 root rt 0 0 0 0 S 0.0 0.0 0:00.00 migration/0 8 root 20 0 0 0 0 S 0.0 0.0 0:00.00 rcu_bh 9 root 20 0 0 0 0 S 0.0 0.0 0:00.60 rcu_sched 10 root rt 0 0 0 0 S 0.0 0.0 0:00.13 watchdog/0 12 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 khelper 13 root 20 0 0 0 0 S 0.0 0.0 0:00.00 kdevtmpfs 14 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 netns 15 root 20 0 0 0 0 S 0.0 0.0 0:00.00 khungtaskd 16 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 writeback 17 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 kintegrityd 18 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 bioset
top命令包含了前面好幾個命令的檢查的內容。比如系統負載情況（uptime）、系統內存使用情況（free）、系統CPU使用情況（vmstat）等。因此通過這個命令，可以相對全面的查看系統負載的來源。同時，top命令支持排序，可以按照不同的列排序，方便查找出諸如內存佔用最多的進程、CPU佔用率最高的進程等。
但是，top命令相對於前面一些命令，輸出是一個瞬間值，如果不持續盯着，可能會錯過一些線索。這時可能需要暫停top命令刷新，來記錄和比對數據。
