原理及架構
1. 核心概念
- producer&Consumer
- Broker:它提供一種傳輸服務,它的角色就是維護一條從生產者到消費者的路線,保證數據能按照指定的方式進行傳輸
- Queue
消息隊列,提供了FIFO的處理機制,具有緩存消息的能力。
rabbitmq中,隊列消息可以設置爲持久化,臨時或者自動刪除。
設置爲持久化的隊列,queue中的消息會在server本地硬盤存儲一份,防止系統crash,數據丟失
設置爲臨時隊列,queue中的數據在系統重啓之後就會丟失
設置爲自動刪除的隊列,當不存在用戶連接到server,隊列中的數據會被自動刪除
- Exchange
Exchange類似於數據通信網絡中的交換機,提供消息路由策略。rabbitmq中,producer不是通過信道直接將消息發送給queue,而是先發送給Exchange。一個Exchange可以和多個Queue進行綁定,producer在傳遞消息的時候,會傳遞一個ROUTING_KEY,Exchange會根據這個ROUTING_KEY按照特定的路由算法,將消息路由給指定的queue。和Queue一樣,Exchange也可設置爲持久化,臨時或者自動刪除。
Exchange有4種類型:direct(默認),fanout, topic, 和headers,不同類型的Exchange轉發消息的策略有所區別:
Direct
直接交換器,工作方式類似於單播,Exchange會將消息發送完全匹配ROUTING_KEY的Queue
fanout
廣播是式交換器,不管消息的ROUTING_KEY設置爲什麼,Exchange都會將消息轉發給所有綁定的Queue。
topic
主題交換器,工作方式類似於組播,Exchange會將消息轉發和ROUTING_KEY匹配模式相同的所有隊列,
比如,ROUTING_KEY爲user.stock的Message會轉發給綁定匹配模式爲 * .stock,user.stock, * . * 和#.user.stock.#的隊列。( * 表是匹配一個任意詞組,#表示匹配0個或多個詞組)
headers
消息體的header匹配(ignore)
- Binding
所謂綁定就是將一個特定的 Exchange 和一個特定的 Queue 綁定起來。
Exchange 和Queue的綁定可以是多對多的關係。
- virtual host
在rabbitmq server上可以創建多個虛擬的message broker,又叫做virtual hosts (vhosts)。
每一個vhost本質上是一個mini-rabbitmq server,
分別管理各自的exchange和bindings。vhost相當於物理的server,
可以爲不同app提供邊界隔離,使得應用安全的運行在不同的vhost實例上,相互之間不會干擾。
producer和consumer連接rabbit server需要指定一個vhost。
一個broker裏可以有多個vhost,用作不同用戶的權限分離。
Channel:消息通道,在客戶端的每個連接裏,可建立多個channel.
- 通信過程
- 假設P1和C1註冊了相同的Broker,Exchange和Queue。P1發送的消息最終會被C1消費。基本的通信流程大概如下所示:
1. P1生產消息,發送給服務器端的Exchange
2. Exchange收到消息,根據ROUTINKEY,將消息轉發給匹配的Queue1
3. Queue1收到消息,將消息發送給訂閱者C1
4. C1收到消息,發送ACK給隊列確認收到消息
5. Queue1收到ACK,刪除隊列中緩存的此條消息
- Consumer收到消息時需要顯式的向rabbit broker發送basic.ack消息或者consumer訂閱消息時設置auto_ack參數爲true。在通信過程中,隊列對ACK的處理有以下幾種情況:
1. 如果consumer接收了消息,發送ack,rabbitmq會刪除隊列中這個消息,發送另一條消息給consumer。
2. 如果cosumer接受了消息, 但在發送ack之前斷開連接,rabbitmq會認爲這條消息沒有被deliver,在consumer在次連接的時候,這條消息會被redeliver。
3. 如果consumer接受了消息,但是程序中有bug,忘記了ack,rabbitmq不會重複發送消息。
4. rabbitmq2.0.0和之後的版本支持consumer reject某條(類)消息,可以通過設置requeue參數中的reject爲true達到目地,那麼rabbitmq將會把消息發送給下一個註冊的consumer。
一、安裝
- 安裝erlang,rpm -ivh erlang-19.0.4-1.el7.centos.x86_64.rpm
- 安裝rabbitmq,rpm -ivh rabbitmq-server-3.6.12-1.el7.noarch.rpm
二、啓動
- systemctl start rabbitmq-server
- 設置開機自啓動,systemctl enable rabbitmq-server
三、配置
- 創建用戶,因爲缺省的guest/guest用戶只能在本地登錄
例如:創建一個admin/admin123,並讓他成爲管理員
1. rabbitmqctl add_user admin admin123
2. rabbitmqctl set_user_tags admin administrator
四、編寫Java Client
- maven引入amqp-client
<dependency>
<groupId>com.rabbitmq</groupId>
<artifactId>amqp-client</artifactId>
<version>5.0.0</version>
</dependency>
- 封裝ConnectionFactory
public static Connection getConnection(String username,
String password,
String host,
String virtualHost,
int port) throws IOException, TimeoutException{
ConnectionFactory factory = new ConnectionFactory();
factory.setUsername(username);
factory.setPassword(password);
factory.setHost(host);
factory.setVirtualHost(virtualHost);
factory.setPort(port);
return factory.newConnection();
}
- 消息生產者
import java.util.concurrent.TimeUnit;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
public class RabbitMqPublish {
private final static String QUEUE_NAME = "hello";
public static void main(String[] args) throws Exception {
Connection connection = RabbitMqFactory.getConnection("root", "root@hiekn", "192.168.1.8", "/", 5672);
Channel channel = connection.createChannel();
channel.queueDeclare(QUEUE_NAME, true, false, false, null);
while(true){
try {
TimeUnit.SECONDS.sleep(5);
publish(channel);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
public static void publish(Channel channel) throws Exception{
String message = System.currentTimeMillis()+"";
channel.basicPublish("", QUEUE_NAME, null, message.getBytes());
System.out.println("Publish: " + message);
}
}
- 消息消費者
import java.io.IOException;
import java.util.concurrent.TimeoutException;
import com.rabbitmq.client.AMQP;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.Consumer;
import com.rabbitmq.client.DefaultConsumer;
import com.rabbitmq.client.Envelope;
public class RabbitMqConsumer {
private final static String QUEUE_NAME = "hello";
public static void main(String[] args) throws IOException, TimeoutException {
Connection connection = RabbitMqFactory.getConnection("root", "root@hiekn", "192.168.1.8", "/", 5672);
Channel channel = connection.createChannel();
Consumer consumer = new DefaultConsumer(channel) {
@Override
public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body)
throws IOException {
String message = new String(body, "UTF-8");
System.out.println("Received" + message);
}
};
channel.basicConsume(QUEUE_NAME, true, consumer);
}
}
- 先運行生產者,後運行消費者。控制檯會每隔5s打印一次