ActiveMQ的插件開發介紹

    ActiveMQ是一個流行的開源MQ,我們也大規模應用在網站的方方面面,每天處理上億消息,取得了較好效果。ActiveMQ有一個很好很強大的插件體系,提供了很強的擴展能力,ActiveMQ本身就是使用這一套插件體系實現了很多擴展功能,包括他的權限管理,日誌管理,事務等模塊都是作爲一個插件集成的,我們自己也在消息路由、補償式事務方面使用了它的插件功能,確實非常方便。

    在ActiveMQ中,Broker代表一個運行的MQ節點,ActiveMQ的插件實際上是基於Broker的一個Filter鏈,整個設計類似於servlet的Filter結構,所有的Plugin構成一個鏈式結構,每個插件實際上都是一個"Interceptor",類結構圖如下:

 

 

    其中Broker接口封裝了一個AMQ節點的方方面面的方法,包括連接管理、session管理、消息的發送和接收以及其它的一些功能,BrokerFilter實現這個接口,並提供了鏈式結構支持,可以攔截所有Broker方法的實現並傳遞結果給鏈式結構的下一個,形成了一個完整的"職責鏈"模式,具體層次關係如下,其中,"System Plugin"是指AMQ內部使用Plugin機制實現的一些系統功能,用戶不能定製,"AMQ Plugin"指的是ActiveMQ已經實現好了,可以在配置文件中自由選擇的一些插件,例如簡單的安全插件,JAAS安全插件和DLQ插件等等,用戶插件就是指用戶自己實現的amq插件,需要用戶把相關jar包放入到amq的啓動classpath中,並在配置文件中進行配置才能正確加載的插件。

 

在上面這個層次結構中,最下面的RegionBroker是核心組件,在其之上的都是Broker的插件,繼承之於BrokerFilter,和Broker保持接口兼容但是擴展Broker的功能。

下面舉一個簡單的例子,具體說明一下AMQ的插件是如何工作的。

我們在使用AMQ的過程中發現,在測試環境維護方面有很大的麻煩,具體表現在很多同學在測試項目的時候往往只關注自己項目牽涉的隊列,不會去消費其他"不相關"的隊列,這樣導致的一個問題就是ActiveMQ經常發生大量數據阻塞,導致測試環境不可用,影響相關項目的測試工作。爲了避免這個問題,我們假定在測試環境可以定義以下一些限制條件:

1、 所有隊列堆積消息不超過1000條,超過之後立即清除。

2、 消息超過1個小時沒有消費,就直接過期。

我們可以編寫一個簡單的amq插件來完成這兩個限制條件:

首先,編寫一個插件安裝類:

  1. package com.alibaba.napoli.plugins;  
  2. import org.apache.activemq.broker.Broker;   
  3. import org.apache.activemq.broker.BrokerPlugin;   
  4. import org.apache.commons.logging.Log;   
  5. import org.apache.commons.logging.LogFactory;  
  6. public class MessageControlBrokerPlugin implements BrokerPlugin {   
  7. private static Log log = LogFactory.getLog(StatisticsBrokerPlugin.class);  
  8. public Broker installPlugin(Broker broker) throws Exception {   
  9. log.info("install MessageControlBrokerPlugin");   
  10. return new MessageControlBroker(broker);   
  11. }   
  12. }  
  13. 其次,編寫真正的插件實現:  
  14. package com.alibaba.napoli.plugins;  
  15. import java.io.IOException;  
  16. import org.apache.activemq.broker.Broker;   
  17. import org.apache.activemq.broker.BrokerFilter;   
  18. import org.apache.activemq.broker.ConnectionContext;   
  19. import org.apache.activemq.broker.ProducerBrokerExchange;   
  20. import org.apache.activemq.broker.region.Destination;   
  21. import org.apache.activemq.broker.region.MessageReference;   
  22. import org.apache.activemq.broker.region.Queue;   
  23. import org.apache.activemq.command.Message;   
  24. import org.apache.commons.logging.Log;   
  25. import org.apache.commons.logging.LogFactory;  
  26. /**  
  27. * 開發環境管理插件,符合兩個條件進行消息清理:<br>  
  28. * 1 消息累積超過1000條  
  29. * 2 消息超過1個小時無人消費  
  30. * @author guolin.zhuanggl  
  31.  
  32. */   
  33. public class MessageControlBroker extends BrokerFilter {   
  34. public static Log log = LogFactory.getLog(DiscardingDLQBroker.class);   
  35. private static final long DEFAULT_EXPIRATION = 3600*1000;   
  36. private static final long DEFAULT_PURGE_COUNT = 1000;  
  37. public MessageControlBroker(Broker next) {   
  38. super(next);   
  39. }  
  40. @Override   
  41. public void messageExpired(ConnectionContext context,   
  42. MessageReference message) {  
  43. Message msg = null;   
  44. try {   
  45. msg = message.getMessage();   
  46. catch (IOException e) {   
  47. log.error("failed to fetch content: ",e);   
  48. }   
  49. purgeMessage(msg);   
  50. // TODO Auto-generated method stub   
  51. super.messageExpired(context, message);   
  52. }  
  53. /**  
  54. * 清除隊列中的所有消息  
  55. */   
  56. private void purgeMessage(Message message){   
  57. Destination r = message.getRegionDestination();   
  58. if(r instanceof Queue){   
  59. try {   
  60. //如果累積消息超過1000個,清除隊列消息   
  61. if(((Queue) r).getMessages().size() > DEFAULT_PURGE_COUNT){   
  62. ((Queue) r).purge();   
  63. }   
  64. catch (Exception e) {   
  65. // TODO Auto-generated catch block   
  66. log.error("failed to purge queue "+r.getName(),e);   
  67. }   
  68. }  
  69. }   
  70. /**  
  71. * 當消息發送時,全部設置過期時間1個小時,測試環境專用!!!  
  72. */   
  73. @Override   
  74. public void send(ProducerBrokerExchange producerExchange,Message messageSend) throws Exception {   
  75. long oldExp = messageSend.getExpiration();   
  76. messageSend.setExpiration(oldExp < DEFAULT_EXPIRATION && oldExp > 0 ? oldExp : DEFAULT_EXPIRATION );   
  77. purgeMessage(messageSend);   
  78. super.send(producerExchange, messageSend);   
  79. }  
  80. }  
 

然後,將這兩個類打包爲myplugin.jar,並放在activemq啓動目錄下的lib目錄下

最後,在activemq.xml文件中增加一個簡單的spring配置項:

<bean xmlns="http://www.springframework.org/schema/beans
id="purgePlugin" 
class="com.alibaba.napoli.plugins.MessageControlBrokerPlugin"> 
</bean>

然後,重啓activemq,就會發現這個插件已經被加載。



發佈了234 篇原創文章 · 獲贊 50 · 訪問量 169萬+
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章