如果第二次看到我的文章，歡迎「文末」掃碼關注我喲~
每週五11：45 按時送達。當然了，也會時不時加個餐～
我的第「124」篇原創敬上
大家好，我是Z哥。
好久沒寫技術文章了，最近正好有進行一些思考，順手寫出來分享給大家。
上了一定規模的系統，特別是To C的系統，性能優化或多或少都會被逼着去做一下。否則，系統便無法支撐業務的發展，技術成了拖後腿，不是引領業務了。
一旦線上出現了性能問題，就會很棘手。因爲它和業務功能上的Bug不同，後者的分析和解決思路更清晰，只要日誌記錄到位，沿着一條已知的業務邏輯線，很容易就能找到問題根源。
而性能問題就會複雜的多，導致的因素有很多，甚至會是多種因素共同作用下的結果。比如，代碼質量低下、業務發展太快、架構設計不合理等等。
而且一般情況下，性能問題處理起來比較耗時，涉及到的分析鏈路可能會很長，特別是自己小組之外的上下游系統，很多人不願意幹，或者說有心無力。最多采用一些臨時性的補救手段，碰碰運氣。比如，擴容增加機器、重啓大招、……。
有些臨時性的補救措施，有時候不但不能解決問題，還會埋下新的隱患。
比如，從表象上看到某個程序因爲給的資源不足導致產生性能問題。臨時增加更多資源給它，可能從表面上看，問題是解決了。但是實則可能是因爲程序內部對資源的使用上存在不合理的地方，增加資源只是延緩問題發作的時間，而且還可能會侵佔其它程序的運行資源。
爲了避免陷入如此的窘境，我們應當儘量提前進行性能優化，未雨綢繆。甚至最好是將它作爲一個週期性的工作來進行。
接下去就來分享一下我對做性能優化的思路。
/01 明確優化目的/
很多人優化優化着慢慢變成了爲了優化而優化，目的丟了，或者甚至一開始就沒考慮過。如此會陷入到無意義的性能黑洞中，無法自拔，只是不斷追求更好看的性能指標。
優化的目的可以是增強用戶體驗，比如消除一些有明顯卡頓的頁面和操作。還可以是節省服務器帶寬流量、減少服務器壓力這些。無論如何，你需要有一個目的。
/02 定標準，做到什麼程度/
優化這事是永無止境的，爲了避免陷入到前面說的無意義的性能黑洞中，我們最好能夠根據實際的業務情況定義出一個相對客觀的標準，代表優化到什麼程度。
我自己慣用的標準是確保比預期高50%，如果條件允許則爭取到100%。
比如，根據當下的性能指標與業務量對比，發現最大併發數可能會超過當前的2倍，那麼此時優化到爭取優化提升3倍，至少保證能提升2.5倍，是一個比較合理的標準。
之前專門寫過一篇關於容量預估的文章《做「容量預估」可沒有true和false》，可以在文末跳轉過去看下，這裏就不展開了。
/03 找到瓶頸點/
很多人做優化的時候，逮着代碼就開始改。的確，只要有一定的知識積累，很容易就能從代碼中發現，寫法A不如寫法B這樣的代碼。
但其實大部分情況下，「流程上的優化遠勝於語法級別的優化」。比如將每一個字符串拼接改成用StringBuilder來實現，大多數情況下帶來的成果其實很小，甚至在某些情況下還不如不改。
所以，我們最好還是能夠藉助一些客觀數據，以獲得更多的運行環境相關的信息，來找到整個“木桶”上最短的一塊“板”。如整個系統的總體架構、服務器的信息等，便於定位到底性能的瓶頸點在哪。
「流程上的優化遠勝於語法級別的優化」中的“流程”除了業務流程之外，還包括技術層面的流程，比如數據在網絡中的流轉過程。
/04 着手優化/
最後纔是着手優化。
做優化的時候需要避免兩個常見的誤區。
第一，不要過度追求應用的單機性能，如果單機表現良好，還應該從整體的角度去思考。
第二，不要過度追求單一維度上的極致優化，比如過度追求 CPU 的性能而忽略了內存方面的瓶頸。
正確的思路一般符合下面兩個方向。
第一，空間換性能。一個節點頂不住就多複製一個節點出來，獨一份的數據導致資源競爭得厲害，就多複製一份數據出來。
第二，距離換性能。數據從服務端經過層層處理返回到客戶端覺得慢的話，那麼能不能直接保存在客戶端，或者至少是離客戶端儘可能近的地方。
好了，思路清楚了，具體在做的時候我建議你根據下面小標題的順序進行。不管是主動地性能優化，還是被動地排查性能問題都一樣。
/01 應用程序層面/
不管你願不願意承認，現實中的大部分性能問題皆是應用程序自身部分的代碼導致的。
我們總是不太願意承認自己的錯誤，我見過太多程序員總是習慣性的將問題先歸結於硬件問題，網絡問題等等，然後最終排查下來的根源往往還是在coding的應用程序上。
所以，我們更應該先從應用程序本身入手進行分析。而且，應用程序所處的位置更「上游」，可操作性更強，讓我們可以有更多的手段進行優化。
01 緩存
首先，最常見的便是「緩存」，這是用空間換性能的經典。
數據必然是存儲在非易失性的數據庫中的，但是一些會被高頻訪問的數據，將它從數據庫中複製一份，存儲在易失性的內存上做緩存，可以大大提高被訪問的性能。這個道理大家都懂，就不多說了。
但是值得提醒的一點是，緩存數據的數據結構設計很重要，沒有一種數據結構是萬能的。需要更多的權衡，因爲數據結構設計的越簡單、單一，緩存數據的二次運算就越多；反之，所有都存儲「結果數據」的話，需要冗餘的數據量又過大（緩存數據更新還麻煩）。
還得提醒一點，如果緩存的數據量不小，還得考慮增加一個緩存淘汰算法，否則緩存命中率不堪入目，白白浪費大量內存資源。
之前的《分佈式系統系列》中有幾篇緩存相關的聊了很多細節，可以在文末跳過去查閱。
02 異步
舉個現實生活中的例子，如果你在手機上點了一杯奶茶，去店裏拿的時候發現前面還有20個號，你會在這乾等半小時麼？
我想大部分人都不會吧，寧願去別的地方溜溜。異步就是通過避免“乾等着”來提升性能的手段。
做異步主要是以下兩種方式，
通過線程進行異步。這主要用於涉及到I/O的地方，像磁盤I/O和網絡I/O。一旦產生I/O其實就意味着背後的操作是由另外一個程序在進行，此時CPU就不用空着了，讓它忙別的去吧。
通過中間件異步，比如MQ。這用於更大的場景裏，比如在某些流程中、上下游系統的銜接中，如果有些結果並不需要實時收到，那麼通過MQ進行異步就可以大大提高性能。畢竟MQ的性能更接近NoSQL，性能自然比關係型數據庫高的多。更何況，還將一些業務邏輯的預算給滯後了，當下的性能會更好。
03 多線程&分佈式
這兩點都是「分治」思想的體現。一個快遞員送1000個包裹比較慢，那麼讓10個快遞員同時各送100個自然就快了。
但是切勿分的太狠，畢竟，多起一個線程相當於多一個放養的娃，放出去太多的話，管理成本很高，可能反而會更慢。這就是線程切換的成本，分佈式系統中也存在類似的管理成本。
不過，一個小建議送給你。不到迫不得已，能通過「單機多線程」應付的，就不要引入分佈式了。因爲，網絡這個東西實在太不靠譜了，你得爲它做大量的額外工作。
04 延後運算
這個和緩存的思路相反，將一些運算儘可能的延後到用的時候。適用的場景也和緩存相反，適用於一些低頻的、運算耗時的數據上。
延遲加載、插件化等等就是該思想的體現。
05 批量，合併
如果你需要在短時間內頻繁的傳遞多個數據給同一個目的地，那麼儘量考慮將他們打包到一起，一次性傳輸，特別是涉及到I/O的場景。
如果手頭的系統還是一個單點系統，這招的性價比就非常高。在避開分佈式系統的複雜性的前提下，獲得性能提升。
數據庫的bulk操作，前端的sprite圖，都是該思想的體現。
應用程序層面的其它優化方式還有很多。比如，用長鏈接代替頻繁打開關閉的短鏈接、壓縮、重用等等。這些相對比較簡單和好理解，就不多說了。
應用程序層面的事情做到位了之後，我們再來考慮組件層面的優化。
/02 組件層面/
組件是指那些非業務性的東西，比如一些中間件、數據庫、運行時的環境（JVM、WebServer）等。
數據庫的調優，總的來說分爲以下三部分：
SQL語句。
索引。
連接池。
其它的一些，比如JVM的調優最主要的就是對「GC」相關的配置調優。WebServer的調優主要是針對「連接」相關的調優。這些細節就不贅述了，資料多到看不過來。
/03 系統層面/
系統層面的一些調優工作，涉及到運維工程師的一些工作，我不是很擅長就不誤人子弟了。但是我們可以藉助系統層面的一些技術指標來觀測並判斷我們的程序是否正常。比如，CPU、線程、網絡、磁盤、內存。
01 CPU
判斷CPU是否正常，大多數情況下關注這三個指標就夠了，CPU利用率、CPU平均負載、CPU上下文切換。CPU利用率大家基本上都知道，就不多說了，那就說說後面兩個。
關注CPU平均負載的時候，特別需要注意趨勢的變化。如果 1 分鐘/5 分鐘/15 分鐘的三個值相差不大，那說明系統負載很平穩，則不用關注，如果這三個值逐漸降低，說明負載在漸漸升高，需要排查具體的原因。
CPU上下文切換。上下文切換的次數越多，就意味着更多的CPU時間消耗在寄存器、內核棧以及虛擬內存等數據的保存和恢復上，真正進行你所期望的運算工作的時間就越少，系統的整體性能自然就會下降。導致這個情況的原因主要有兩點，
程序內的磁盤I/O、網絡I/O比較多。
程序內啓動的線程過多。
02 線程
線程方面除了關注線程數之外，還需要關注一下處於「掛起」狀態的線程數量有多少。
掛起狀態的線程數過多，意味着程序裏鎖競爭激烈，需要考慮通過其它的方案來縮小鎖的粒度、級別，甚至是避免用鎖。
03 網絡
通常在硬件層面內網帶寬會遠大於外網的帶寬，所以，外網帶寬被吃滿的情況更加常見，特別是多圖、多流媒體類型的可對外訪問系統。關於流量大小相關的問題一般大家都能想到，就不多說了。
但是，Z哥提醒你要特別關注端口的使用和每個端口上的連接狀態情況。比較常見的問題是，連接用完有沒有及時釋放，導致端口被佔滿，後續新的網絡請求無法建立連接通道。（可以通過netstat、ss獲取網絡相關的信息。）
04 磁盤
除非是規模非常大的系統，否則一般情況下，從磁盤的指標上看不出啥問題。
平時看的時候，除了看看利用率、吞吐量和請求數量之外，有兩個容易被忽略的點可以多關注下。
第一點，如果I/O利用率很高，但是吞吐量很小，則意味着存在較多的磁盤隨機讀寫，最好把隨機讀寫優化成順序讀寫。（可以通過 strace 或者 blktrace 觀察 I/O 是否連續判斷是否是順序的讀寫行爲）
其次，如果I/O等待隊列的長度比較大，則該磁盤存在 I/O 性能問題。一般來說，如果隊列長度持續超過2就可以這麼認爲。
05 內存
關注內存的時候除了內存消耗之外，有一個Swap換入和換出的內存大小需要特別注意一下。因爲Swap需要讀寫磁盤，所以性能不是很高。如果GC的時候遍歷到的對象恰巧被Swap 出去了，便會有磁盤I/O產生，性能自然會下降。所以這個指標不應該太高。
大多數內存問題，都和對象常駐內存不及時釋放有關，有很多工具可以觀察對象的內存分配情況。如，jmap、VisualVM、heap dump等。
如果你的程序部署在linux系統上的話，不得不錯過Brendan Gregg的大神整理的精華。下面就引用一張圖，給大家感受一下，具體可以去 http://www.brendangregg.com/linuxperf.html 自行查閱更多相關的內容。
▲圖片來自於brendangregg.com
最後，雖然性能優化是一件大家都知道的好事，但是再好的事做起來都有成本。所以，如非必要，不要過早、過度進行性能優化哦。
好了，總結一下。
這篇呢，Z哥和你聊了一下非常讓程序員們頭疼的程序性能問題。想要避免受這個問題困擾的前提是事前做好性能優化工作。
做性能優化不能走一步算一步。事先需要做三件事「明確優化目的」、「定標準」、「找到瓶頸點」。
具體做優化的時候建議從應用程序層面開始，再到組件層面，最後纔是系統層面，從上往下，層層深入。順帶分享了每個層面的常用一些方法和思路。
希望對你有所啓發。
在一個大系統中，數據就像水，整個系統就像是一個漏斗，漏斗的每一層代表每個子程序。上層的子程序對性能的損耗越低，能流下去的水就越多，直到最後一層「數據庫」處，也可以理解爲是存儲。
所以，趕緊行動起來，開啓保衛數據庫之戰吧。
推薦閱讀：
作者：Zachary
出處：https://zacharyfan.com/archives/1051.html
如果你喜歡這篇文章，可以點一下左下角的「推薦」。
這樣可以給我一點反饋。: )
謝謝你的舉手之勞。
▶關於作者：張帆（Zachary，個人微信號：Zachary-ZF）。堅持用心打磨每一篇高質量原創。歡迎掃描下方的二維碼~。
如果你是初級程序員，想提升但不知道如何下手。又或者做程序員多年，陷入了一些瓶頸想拓寬一下視野。歡迎關注我的公衆號「跨界架構師」，回覆「技術」，送你一份我長期收集和整理的思維導圖。
如果你是運營，面對不斷變化的市場束手無策。又或者想了解主流的運營策略，以豐富自己的“倉庫”。歡迎關注我的公衆號「跨界架構師」，回覆「運營」，送你一份我長期收集和整理的思維導圖。
定期發表原創內容：架構設計丨分佈式系統丨產品丨運營丨一些深度思考。
