MySQL連接數超過限制的解決方法

最近網站出現 User 數據庫名稱 has already more than 'max_user_connections' active connections 的報錯,網站癱瘓。有必要研究下這個問題。
max_user_connections 是 MySQL 用戶連接數的最大值設置,整段語句的意思是:服務器的 MySQL 的最大連接數參數設置不足。解決方法:修改 MySQL 安裝目錄下 my.ini 或者 my.cnf 文件內的 max_user_connections 參數的數值,重啓 MySQL 服務器。

但是正常來說,MySQL默認的100個連接數是足夠的。我們需要從程序上去考慮。MySQL的默認最大連接數爲100(N),實際給普通用戶使用只有N-1個,保留一個連接是留給超級管理員使用的,防止連接佔滿了不會把管理員也踢出來。很多網站在運行的時候都會出現連接數受限現象,我認爲十之八九並非是網站的真實訪問量太大導致連接數超標,更多是因爲我們在設計網站程序的時候採用了不合理的設計架構或數據結構引起的。非正常連接超限可能原因如下(天緣即時歸納未必完整或無錯訛僅供參考):

類似人數、在線時間、瀏覽數等統計功能與主程序數據庫同屬一個數據空間時就很容易出現。
複雜的動態頁尤其是用戶每次瀏覽都涉及到多數據庫或多表操作時候也很容易出現。
還有就是程序設計的不合理(比如複雜運算、等待等操作放置在數據庫交互行爲中間進行),或者程序存在釋放BUG。
計算機硬件配置太低卻安裝太高版、太高配置的MySQL。
未採用緩存技術。
數據庫未經過優化或表格設計及其複雜。
等等一些原因,都會延長數據庫的數據交互時間或增加交互次數。所以,如果大家遇到這類問題,首先要考慮程序是否存在BUG導致連接釋放失敗,再次就是考慮優化軟硬件。當然修改MySQL連接數也是軟件優化的操作方法之一,希望大家都能夠本着學習的態度通過研究一下自身的原因從而解決這一問題。如果實在是找不到原因,那就只好先修改連接數,暫緩定位真實原因了。

關於PHP的數據庫持久連接 mysql_pconnect
PHP程序員應該都知道連接MySQL數據庫可以使用mysql_pconnect(永久連接)函數,使用數據庫永久連接可以提高效率,但是實際應用中數據庫永久連接往往會導致出現一些問題,通常的表現就是在大訪問量的網站上時常發生斷斷續續的無法連接數據庫的情況,出現類似"Too many connections in ..."的錯誤提示信息,重新啓動服務器又正常了,但過不了一會兒又出現同樣的故障。對於這些問題的成因,恐怕就不是每個人都能說清楚的了,雖然PHP文檔裏有一些相關資料,但是解釋的並不淺顯易懂,這裏我厚着臉皮試圖做一個簡單的討論,所述觀點不見得全都正確,歡迎大家反饋意見。

首先看看數據庫永久連接的定義:永久的數據庫連接是指在腳本結束運行時不關閉的連接。當收到一個永久連接的請求時。PHP 將檢查是否已經存在一個(前面已經開啓的)相同的永久連接。如果存在,將直接使用這個連接;如果不存在,則建立一個新的連接。所謂"相同"的連接是指用相同的用戶名和密碼到相同主機的連接。

PHP使用永久連接方式操作MySQL是有前提的:就是PHP必須安裝爲多線程或多進程Web服務器的插件或模塊。最常見的形式是把PHP用作多進程Apache服務器的一個模塊。對於一個多進程的服務器,其典型特徵是有一個父進程和一組子進程協調運行,其中實際生成Web頁面的是子進程。每當客戶端向父進程提出請求時,該請求會被傳遞給還沒有被其它的客戶端請求佔用的子進程。這也就是說當相同的客戶端第二次向服務端提出請求時,它將有可能被一個不同的子進程來處理。在開啓了一個永久連接後,所有不同子進程請求SQL服務的後繼頁面都能夠重新使用這個已經建立的 SQL服務器連接。它使得每個子進程在其生命週期中只做一次連接操作,而非每次在處理一個頁面時都要向 SQL 服務器提出連接請求。每個子進程將對服務器建立各自獨立的永久連接。PHP本身並沒有數據庫連接池的概念,但是Apache有進程池的概念, 一個Apache子進程結束後會被放回進程池, 這也就使得用mysql_pconnect打開的的那個mysql連接資源可以不被釋放,而是依附在相應的Apache子進程上保存到了進程池中。於是在下一個連接請求時它就可以被複用。一切看起來似乎都很正常,但是在Apache併發訪問量大的時候,如果使用mysql_pconnect,會由於之前的Apache子進程佔用的MySQL連接沒有close, 很快使MySQL達到最大連接數,使得之後的請求可能得不到響應。

上面的部分文字是摘抄自PHP文檔,看起來可能還是有些文縐縐的不好理解,那麼我就用大白話再舉一個例子來說明問題:

假設Apache配置最大連接數爲1000,MySQL配置最大連接數爲100,當Apache服務器接到200個併發訪問的時候,其中100個涉及到數據庫訪問,剩下的100個不涉及數據庫訪問,因爲這個時候還不存在可用的數據庫連接,所以這裏面涉及到數據庫訪問的100個併發會同時產生100個數據庫永久連接,達到了數據庫最大連接數,當這些操作沒有結束的時候,任何其他的連接都無法再獲得數據庫連接,當這些操作結束了,相應的連接會被放入進程池,此時Apache的進程池裏就有了200個空閒的子進程,其中100個是帶有數據庫連接的,由於Apache會爲訪問請求隨機的挑選空閒子進程,所以你得到的子進程很可能是不包含數據庫連接的那100箇中的一個,而數據庫連接已經達到了最大值,你也不可能成功的建立新的數據庫連接,唉,你便只好不停的刷新頁面,哪個時候運氣好,碰巧分配到了帶有數據庫連接的子進程,才能正常瀏覽頁面。如果是大訪問量的網站來說,任何時候都可能存在大量的併發,所以瀏覽者可能就會不停的發現無法連接數據庫的現象了。

或許你會說,我們把Apache和MySQL的最大連接數調成一樣大不就可以了麼?是的,合理的調整這個最大連接數某種程度上會避免這個問題的發生,但是Apache和MySQL的負載能力是不同的,如果按照Apache的負載能力來設置,對於MySQL來說,這個最大連接數就偏大,會產生大量的MySQL數據庫永久連接,打個比方,就好像和平時代還要養活一個幾百萬的軍隊一樣,其開銷得不償失;而如果按照Mysql的負載能力設置,對於Apache來說,這個最大連接數就偏小,有點殺雞牛刀的感覺,無法發揮Apache的最大效率。

所以按照PHP手冊上的介紹,只適合在併發訪問不大的網站上使用數據庫永久連接,但對於一個併發訪問不大的網站來說,使用數據庫永久連接帶來的效率提高似乎沒有太大的意義,從這個角度上來看,我覺得PHP中的數據庫永久連接基本上是一個雞肋的角色,如果你一定要使用數據庫連接池的概念,可以嘗試一下sqlrelay或者Apache本身提供的mod_dbd,說不定會有驚喜。

關於mysql_free_result和mysql_close
之前用mysql的時候一直是在用短鏈接,調用mysql_store_result獲取一次數據之後就直接調用:
複製代碼 代碼如下:

mysql_free_result(m_result);
mysql_close(m_Database);

但是有兩個問題:

當使用長連接時(即connect之後一直不close),如果最後會調用mysql_close,需不需要每次都調用mysql_free_result呢?
當mysql_close調用之後,m_result的數據是否還可以用。
先說一下結論:

必須每次調用。因爲經過測試,每次mysql_store_result的指針都是不同的,可見並不是共享了同一塊buf。
還是可以使用。經過valgrind掃描,只調用mysql_close的掃描結果是:
複製代碼 代碼如下:

==9397== 16,468 (88 direct, 16,380 indirect) bytes in 1 blocks are definitely lost in loss record 4 of 5
==9397== at 0x40219B3: malloc (vg_replace_malloc.c:195)
==9397== by 0x8053EA2: my_malloc (in /data/home/dantezhu/appbase/application/platform/openqqcom/share/db_openright/test/test)
==9397== by 0x806D314: mysql_store_result (in /data/home/dantezhu/appbase/application/platform/openqqcom/share/db_openright/test/test)
==9397== by 0x804BB04: CMySQLCppClient::Result(st_mysql_res*&) (mysql_cpp_client.cpp:127)
==9397== by 0x804AB58: CDBOpenRight::GetUinsByApp(unsigned int, std::set<unsigned int, std::less<unsigned int>, std::allocator<unsigned int> >&) (db_openright.cpp:58)
==9397== by 0x8049F10: main (test.cpp:27)

以後再慢慢研究。。
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章