大型互聯網網站架構心得之二:並、換和其它

上次說的“分”是一個比較大的原則也是一個比較高層的原則,這次我想說一下其它兩個原則:並與換。

 

 

爲什麼要分?是因爲我們希望通過分來提高系統的承載能力,那並又是並什麼呢?我想了一下有幾個方面可以並:

 

1.       合併用戶請求,最基本的就是合併CSS/圖片/腳本,還可以合併頁面。不過合併就可能產生流量的浪費,需要有一個平衡點。

2.       合併接口的粒度,如果做分佈式應用的話,我們可能不會直接訪問數據庫而是調用應用層提供的接口,由於是網絡調用,代價比較大,因此在設計的時候儘量提供粒度比較粗的接口,一次調用返回比較多的數據,而不是細化到添加刪除修改的層次。

3.       合併接口的部署,對於頻繁的跨機器調用可以考慮有一些數據冗餘,把跨網絡的服務編程進程間通訊,甚至轉到客戶端來做。比如論壇發貼時候髒詞的過濾,直接調用應用層提供的接口(跨機器)是可以的,但是可能代價比較大,可以把這個接口使用IPC方式部署在本機。

 

 

時間換空間,空間換時間是常見的做法,具體一點說:

 

1.       緩存。緩存的重要性早計算機的硬件中就有重要的體現。對於網站,有很多種緩存,可以是客戶端資源的緩存,可以是頁面輸出緩存,也可以是應用層的數據緩存,目的都是一樣的,或是減少了服務器請求次數,或是減少了請求的處理過程,或是減少了數據庫的訪問次數。當然,生成靜態文件也可以算是一種緩存。不訪問磁盤固然不可能,但是我們要極大限度降低磁盤訪問的機會。

2.       有的時候爲了獲取極快的響應,我們還會不惜代價採用重複計算。比如,我們的某個操作很可能會由於網絡問題等原因響應比較慢,在設計的時候可以有一個統一的處理接口,由這個接口分發到不同的服務器去異步實現這個操作,哪個服務器先返回了結果我們就用這個結果,然後殺死其他服務器的冗餘操作。

3.       網站一般追求比較快的響應,一般不太會在比較高的層次用時間來換取空間,但是在一些用戶獨有數據的處理算法上可能還是會考慮到空間的節省問題。

4.       有的時候我們會用一些聚合表來存放聚合數據,也就是進行一些預計算提高複雜計算(比如報表)的性能。當然,對於數據分析,構建多維數據庫也是一種不錯的選擇。

 

有很多網友留言說說的比較粗,沒有什麼具體的東西。我覺得架構這個東西很難去說具體怎麼做,因爲具體實施的時候要看情況去應用的,由於沒有完美的東西,所以做架構通常是去做一個平衡,很可能某一個側重不同會影響到架構的實施。希望我的這些文章能給大家一個提示的作用,看了之後如果你覺得“這點我倒沒有考慮到,以後要注意”那或許就是最大的幫助了,下面我想說一些其它方面的問題,每一條都很零散,算是一個補充吧:

 

1.       到底是採用已有的東西還是自己去做需要詳細考慮的,採用別人的東西可能比較穩定,但是自己的控制少了一點,採用自己做的東西可以很靈活,但是可能會問題比較多。不管怎麼樣,我們在採用一個第三方框架的時候務必要進行縝密的調查,看到他的不足,否則項目很可能在後期被這個框架制約,反之,決定自己去做一個框架的時候也要看到自己需要什麼其他框架不能提供的東西。

2.       數據傳輸的時候可以做壓縮,但要考慮到壓縮解壓縮需要CPU資源,在IO(磁盤,帶寬,傳輸能力)和CPU之間有一個平衡的考慮。

3.       理想的可伸縮性架構是可以自由增加或替換服務器,無需去停機維護或做很大的調整。在使用一個統一的調度中心來調度這些服務器,分配請求的時候,我們要考慮一下調度服務器能承受多少流量。

4.       使用大量的廉價服務器還是少量的高配服務器?如何根據需求來組合服務器發揮最大作用。

5.       對於分佈式構架,我們儘量讓每一個節點保持簡單的邏輯,儘量減少同一層次節點之間的依賴,另外。需要有統一的地方來管理所有的節點。

6.       功能分解、使用異步進行整合、故障轉移、失效保護。

7.       軟件的架構升級和計算機硬件的架構升級很像,可能有一段時期,我們是在慢慢提高整體能力,2年也才提高了幾倍,之後發現只有通過某種徹底的架構改變才能提高數十倍的能力,升級之後,我們或許又會遇到其他問題。就像CPU,是簡單提高主頻還是徹底更換架構。

8.       數據方面,讀寫分離、數據庫分隔、功能劃分、緩存、鏡像。

9.       硬件網絡上的架構很重要,但軟件開發中的一些細節不可忽略,好的架構不意味着不需要代碼審閱。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章