ActiveMQ使用經驗與優化

1.1 不要頻繁的建立和關閉連接

JMS使用長連接方式,一個程序,只要和JMS服務器保持一個連接就可以了,不要頻繁的建立和關閉連接。頻繁的建立和關閉連接,對程序的性能影響還是很大的。這一點和jdbc還是不太一樣的。

1.2 Connectionstart()stop()方法代價很高

JMSConnectionstart()stop()方法代價很高,不能經常調用。我們試用的時候,寫了個jmsconnection pool,每次將connection取出pool時調用start()方法,歸還時調用stop()方法,然而後來用jprofiler發現,一般的cpu時間都耗在了這兩個方法上。

1.3 start()後才能收消息

Connectionstart()方法調用後,才能收到jms消息。如果不調用這個方法,能發出消息,但是一直收不到消息。不知道其它的jms服務器也是這樣。

1.4 顯式關閉Session

如果忘記了最後關閉ConnectionSession對象,都會導致內存泄漏。這個在我測試的時候也發現了。本來以爲關閉了Connection,由這個Connection生成的Session也會被自動關閉,結果並非如此,Session並沒有關閉,導致內存泄漏。所以一定要顯式的關閉ConnectionSession

1.5 Session做對象池

Session做對象池,而不是ConnectionSession也是昂貴的對象,每次使用都新建和關閉,代價也非常高。而且後來我們發現,原來Connection是線程安全的,而Session不是,所以後來改成了對Session做對象池,而只保留一個Connection

2 集羣

ActiveMQ有強大而靈活的集羣功能,但是使用起來還是會有很多陷阱。

2.1 broker cluster master-slave

ActiveMQ可以做broker的集羣,也可以做master-slave方式的集羣。前者能在多個broker之前fail-overload-balance,但是在某個節點出故障時,可能導致消息丟失;而後者能實時備份消息,和fail-over,但是不能load-balancebroker cluser的方式,在一個broker上發送的消息可以在其它的broker上收到。當一個broker失效時,客戶端可以自動的轉到別的broker上運行,多個broker可以同時提供服務,但是消息只存儲在一個broker上,如果那個broker失效了,那麼客戶端直到它重新啓動後才能收到該broker上的消息,假如很不幸,那個broker的存儲介質壞了,那麼消息就丟失掉了。
Master-slave
方式中,只有master提供服務,slave只是實時的備份master的數據,所以消息不會丟失。當master失效時,slave會自動升爲master,客戶端會自動轉到slave上工作,所以能fail-over。由於只有master提供服務,所以不能將負載分到多個broker上。
其實單個broker的性能已經是相當的驚人了,在我們公司的機器上能達到每秒收發4000個消息,沒個消息4K字節這樣的速度,足夠公司目前的需要了,而公司並不希望丟失任何數據,所以我們選擇使用master-slave模式。

2.2 多種master-slave模式

master-slave也有多種實現方式。它們的不同只是在共享數據和鎖機制上。

2.2.1 Puremaster-slave

Puremaster-slave,顯示的在配置文件中指定一個broker做爲另一個brokerslave。運行時,slave同過網絡自動從master出複製數據,同時在和master失去連接時自動升級爲master。當master失效,slave成爲master後,如果要讓原先的master重新投入運行,需要停掉運行中的slave(現在升級爲master),手動複製slave中的數據到master中。再重新啓動masterslave。這種方式最簡單,效率也不錯,但是隻能有兩臺做集羣,只能fail-over一次,而且需要停機回覆master-slave結構。

2.2.2 JDBCmaster-slave

這種方式不需要特殊的配置,只要讓所有的節點都把數據存儲到同一個數據庫中。先拿到數據庫表的鎖的節點成爲master,一旦它失效了,其它的節點獲得鎖,就可以成爲master。因爲數據通過數據庫共享,放在一個地方,不需要停機恢復master-slave。這種方式,需要額外的數據庫服務器,如果數據庫失效了,那麼就全失效了,而且速度不是很快。我們在用mysql測試時,並沒有成功,master失效後,其他的節點始終沒有升級成slave,可能是數據庫配置的問題。

2.2.3 Share filemaster-slave

這種方式類似於前者,也不需要特別的配置,只是通過共享文件系統來共享數據,靠文件鎖實現只有一臺成爲master。共享文件系統的方式有很多,我們測試了nfs v4 (v3bug,不行)最終在穩定性,效率等方面不是很滿意,可能是通過網絡太慢了。

測試過衆多master-slave模式後發現,pure方式管理起來麻煩,jdbc方式成本高,效率低,share file方式需要高性能的共享文件,都有缺點。鑑於單臺activeMQ很可靠,而我們的基礎平臺組願意用硬件備份,最終還是決定不用master-slave了,也不用broker cluster,就用單臺,通過硬件冗餘保證數據不會丟失,並找另外一臺刀片機做冷備,在主服務器失效時頂替。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章