下載MQ並解壓
- [01]# wget http://archive.apache.org/dist/rocketmq/4.3.2/rocketmq-all-4.3.2-bin-release.zip
- [01]# unzip rocketmq-all-4.3.2-bin-release.zip
- [01]# mv rocketmq-all-4.3.2-bin-release rocketmq-4.3.2
- [01]# cd rocketmq-4.3.2
根據機器配置調整RocketMq的內存值
- [01]# vim bin/runbroker.sh
- [01]# vim bin/runserver.sh
爲避免啓動報錯以下各項調到1G以上
- runbroker.sh內的配置項: JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx2g -Xmn1g"
- runserver.sh內的配置項: JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx2g -Xmn1g -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"
二.配置多master多slave(2M-2S)模式,異步集羣
進2m-2s-async目錄
- [01]# cd /opt/rocketmq-4.3.2/conf/2m-2s-async
- 保留broker-a.properties和broker-b-s.properties 兩個文件,其他的文件刪除
- [01]# vim broker-a.properties
#集羣名稱
brokerClusterName=RocketMQCluster
#broker名字,名字可重複,主從同名
brokerName=broker-a
#指定啓動服務器ip,修改成自己的服務器ip
brokerIP1=192.168.3.31
#0 表示 Master,>0 表示 Slave
brokerId=0
#Broker 的角色,屬於主還是從,如果brokerId=0,則是master;如果是brokerId=1,則是slave
#- ASYNC_MASTER 異步複製Master
#- SYNC_MASTER 同步雙寫Master
#- SLAVE
brokerRole=ASYNC_MASTER
#nameServer地址,分號分割,修改成自己的服務器ip
namesrvAddr=192.168.3.31:9876;192.168.3.32:9876
#在發送消息時,自動創建服務器不存在的topic,默認創建的隊列數
defaultTopicQueueNums=8
#是否允許 Broker 自動創建Topic,建議線下開啓,線上關閉
autoCreateTopicEnable=true
#是否允許 Broker 自動創建訂閱組,建議線下開啓,線上關閉
autoCreateSubscriptionGroup=true
#Broker 對外服務的監聽端口,
listenPort=10911
#刪除文件時間點,默認凌晨 4點
deleteWhen=04
#文件保留時間,默認 48 小時
fileReservedTime=120
#commitLog每個文件的大小默認1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每個文件默認存30W條,根據業務情況調整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#檢測物理文件磁盤空間
diskMaxUsedSpaceRatio=88
#存儲路徑,需要提前建好文件夾
storePathRootDir=/data/rocketmq/store/broker-a
#commitLog 存儲路徑,需提前建好文件夾
storePathCommitLog=/data/rocketmq/store/broker-a/commitlog
#消費隊列存儲路徑存儲路徑,需提前建好文件夾
storePathConsumeQueue=/data/rocketmq/store/broker-a/consumequeue
#消息索引存儲路徑,需提前建好文件夾
storePathIndex=/data/rocketmq/store/broker-a/index
#checkpoint 文件存儲路徑,需提前建好文件夾
storeCheckpoint=/data/rocketmq/store/checkpoint
#abort 文件存儲路徑,需提前建好文件夾
abortFile=/data/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#刷盤方式
#- ASYNC_FLUSH 異步刷盤
#- SYNC_FLUSH 同步刷盤
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#發消息線程池數量
#sendMessageThreadPoolNums=128
#拉消息線程池數量
#pullMessageThreadPoolNum=128
-
4.[01]# vim broker-b-s.properties
brokerClusterName=RocketMQCluster
brokerName=broker-b
brokerId=1
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH
listenPort=10920
#nameserver地址,分號分割
namesrvAddr=192.168.3.27:9876;192.168.3.31:9876
brokerIP1=192.168.3.27
#在發送消息時,自動創建服務器不存在的topic,默認創建的隊列數
defaultTopicQueueNums=8
#是否允許 Broker 自動創建Topic,建議線下開啓,線上關閉
autoCreateTopicEnable=true
#是否允許 Broker 自動創建訂閱組,建議線下開啓,線上關閉
autoCreateSubscriptionGroup=true#存儲路徑,需提前建好文件夾
storePathRootDir=/data/rocketmq/store/broker-b-s
#commitLog 存儲路徑,需提前建好文件夾
storePathCommitLog=/data/rocketmq/store/broker-b-s/commitlog
#消費隊列存儲路徑存儲路徑,需提前建好文件夾
storePathConsumeQueue=/data/rocketmq/store/broker-b-s/consumequeue
#消息索引存儲路徑,需提前建好文件夾
storePathIndex=/data/rocketmq/store/broker-b-s/index
#checkpoint 文件存儲路徑,需提前建好文件夾
storeCheckpoint=/data/rocketmq/store/checkpoint
#abort 文件存儲路徑,需提前建好文件夾
abortFile=/data/rocketmq/store/abort#刪除文件時間點,默認凌晨 4點
deleteWhen=04
#文件保留時間,默認 48 小時
fileReservedTime=120
#commitLog每個文件的大小默認1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每個文件默認存30W條,根據業務情況調整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#檢測物理文件磁盤空間
#diskMaxUsedSpaceRatio=88
2.創建對應目錄
-
[01]# mkdir -p /data/rocketmq/store/broker-a
[01]# mkdir -p /data/rocketmq/store/broker-a/commitlog
[01]# mkdir -p /data/rocketmq/store/broker-a/consumequeue
[01]# mkdir -p /data/rocketmq/store/broker-a/index
[01]# mkdir -p /data/rocketmq/store/checkpoint
[01]# mkdir -p /data/rocketmq/store/abort -
[01]# mkdir -p /data/rocketmq/store/broker-b-s
[01]# mkdir -p /data/rocketmq/store/broker-b-s/commitlog
[01]# mkdir -p /data/rocketmq/store/broker-b-s/consumequeue
[01]# mkdir -p /data/rocketmq/store/broker-b-s/index
[01]# mkdir -p /data/rocketmq/store/checkpoint
[01]# mkdir -p /data/rocketmq/store/abort
進另一臺 2m-2s-async
-
[02]# vim broker-b.properties
#所屬集羣名字
brokerClusterName=RocketMQCluster
#broker名字,名字可重複,主從需同名
brokerName=broker-b
#指定啓動服務器ip,修改成自己的服務器ip
brokerIP1=192.168.3.32
#0 表示 Master,>0 表示 Slave
brokerId=0
#Broker 的角色,屬於主還是從,如果brokerId=0,則是master;如果是brokerId=1,則是slave
#- ASYNC_MASTER 異步複製Master
#- SYNC_MASTER 同步雙寫Master
#- SLAVE
brokerRole=ASYNC_MASTER
#nameServer地址,分號分割,修改成自己的服務器ip
namesrvAddr=192.168.3.31:9876;192.168.3.32:9876
#在發送消息時,自動創建服務器不存在的topic,默認創建的隊列數
defaultTopicQueueNums=8
#是否允許 Broker 自動創建Topic,建議線下開啓,線上關閉
autoCreateTopicEnable=true
#是否允許 Broker 自動創建訂閱組,建議線下開啓,線上關閉
autoCreateSubscriptionGroup=true
#Broker 對外服務的監聽端口,
listenPort=10911
#刪除文件時間點,默認凌晨 4點
deleteWhen=04
#文件保留時間,默認 48 小時
fileReservedTime=120
#commitLog每個文件的大小默認1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每個文件默認存30W條,根據業務情況調整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#檢測物理文件磁盤空間
diskMaxUsedSpaceRatio=88
#存儲路徑,需提前建好文件夾
storePathRootDir=/data/rocketmq/store/broker-b
#commitLog 存儲路徑,需提前建好文件夾
storePathCommitLog=/data/rocketmq/store/broker-b/commitlog
#消費隊列存儲路徑存儲路徑,需提前建好文件夾
storePathConsumeQueue=/data/rocketmq/store/broker-b/consumequeue
#消息索引存儲路徑,需提前建好文件夾
storePathIndex=/data/rocketmq/store/broker-b/index
#checkpoint 文件存儲路徑,需提前建好文件夾
storeCheckpoint=/data/rocketmq/store/checkpoint
#abort 文件存儲路徑,需提前建好文件夾
abortFile=/data/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#刷盤方式
#- ASYNC_FLUSH 異步刷盤
#- SYNC_FLUSH 同步刷盤
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#發消息線程池數量
#sendMessageThreadPoolNums=128
#拉消息線程池數量
#pullMessageThreadPoolNums=128 -
[02]# vim broker-a-s.properties
#所屬集羣名字
brokerClusterName=RocketMQCluster
#broker名字,名字可重複,主從同名
brokerName=broker-a
#指定啓動服務器ip,修改成自己的服務器ip
brokerIP1=192.168.3.32
#0 表示 Master,>0 表示 Slave
brokerId=1
#Broker 的角色,屬於主還是從,如果brokerId=0,則是master;如果是brokerId=1,則是slave
#- ASYNC_MASTER 異步複製Master
#- SYNC_MASTER 同步雙寫Master
#- SLAVE
brokerRole=SLAVE
#nameServer地址,分號分割,修改成自己的服務器ip
namesrvAddr=192.168.3.31:9876;192.168.3.32:9876
#在發送消息時,自動創建服務器不存在的topic,默認創建的隊列數
defaultTopicQueueNums=8
#是否允許 Broker 自動創建Topic,建議線下開啓,線上關閉
autoCreateTopicEnable=true
#是否允許 Broker 自動創建訂閱組,建議線下開啓,線上關閉
autoCreateSubscriptionGroup=true
#Broker 對外服務的監聽端口,
listenPort=10920
#刪除文件時間點,默認凌晨 4點
deleteWhen=04
#文件保留時間,默認 48 小時
fileReservedTime=120
#commitLog每個文件的大小默認1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每個文件默認存30W條,根據業務情況調整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#檢測物理文件磁盤空間
diskMaxUsedSpaceRatio=88
#存儲路徑,需提前建好文件夾
storePathRootDir=/data/rocketmq/store/broker-a-s
#commitLog 存儲路徑,需提前建好文件夾
storePathCommitLog=/data/rocketmq/store/broker-a-s/commitlog
#消費隊列存儲路徑存儲路徑,需提前建好文件夾
storePathConsumeQueue=/data/rocketmq/store/broker-a-s/consumequeue
#消息索引存儲路徑,需提前建好文件夾
storePathIndex=/data/rocketmq/store/broker-a-s/index
#checkpoint 文件存儲路徑,需提前建好文件夾
storeCheckpoint=/data/rocketmq/store/checkpoint
#abort 文件存儲路徑,需提前建好文件夾
abortFile=/data/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#刷盤方式
#- ASYNC_FLUSH 異步刷盤
#- SYNC_FLUSH 同步刷盤
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#發消息線程池數量
#sendMessageThreadPoolNums=128
#拉消息線程池數量
#pullMessageThreadPoolNums=128
在每臺機器上創建對應的目錄:
-
[02]# mkdir -p /data/rocketmq/store/broker-b
[02]# mkdir -p /data/rocketmq/store/broker-b/commitlog
[02]# mkdir -p /data/rocketmq/store/broker-b/consumequeue
[02]# mkdir -p /data/rocketmq/store/broker-b/index
[02]# mkdir -p /data/rocketmq/store/checkpoint
[02]# mkdir -p /data/rocketmq/store/abort -
[02]# mkdir -p /data/rocketmq/store/broker-a-s
[02]# mkdir -p /data/rocketmq/store/broker-a-s/commitlog
[02]# mkdir -p /data/rocketmq/store/broker-a-s/consumequeue
[02]# mkdir -p /data/rocketmq/store/broker-a-s/index
[02]# mkdir -p /data/rocketmq/store/checkpoint
[02]# mkdir -p /data/rocketmq/store/abort
MQ啓動順序
-
啓動順序:
首先啓動服務器A和服務器B的nameserver;
然後啓動服務器A的主broker-a,然後啓動服務器B的從broker-a-s;
再啓動服務器B的主broker-b,最後啓動服務器A的從broker-b-s; -
啓動相關命令:
(1)啓動多臺nameserver(指定啓動配置文件和啓動日誌):
nohup sh bin/mqnamesrv >logs/mqnamesrv.log 2>&1 &(2)啓動broker-a(指定啓動配置文件和啓動日誌):
nohup sh bin/mqbroker -c conf/2m-2s-async/broker-a.properties >logs/broker-a.log 2>&1 &(3)啓動broker-a-s(指定啓動配置文件和啓動日誌):
nohup sh bin/mqbroker -c conf/2m-2s-async/broker-a-s.properties >logs/broker-a-s.log 2>&1 &(4)啓動broker-b(指定啓動配置文件和啓動日誌):
nohup sh bin/mqbroker -c conf/2m-2s-async/broker-b.properties >logs/broker-b.log 2>&1 &(5)啓動broker-b-s(指定啓動配置文件和啓動日誌):
nohup sh bin/mqbroker -c conf/2m-2s-async/broker-b-s.properties >logs/broker-b-s.log 2>&1 &(6)快速查看啓動進程:
jps
三. 配件啓動MQ-WEB管理界面
-
配置maven環境
-
[0]# cd /opt
[0]# git clone https://github.com/apache/rocketmq-externals.git
等待git完成…
[0]# cd /opt/rocketmq-externals/rocketmq-console/src/main/resources
[0]# vim application.properties
server.contextPath=
server.port=8080 #訪問端口號#SSL setting #server.ssl.key-store=classpath:rmqcngkeystore.jks #server.ssl.key-store-password=rocketmq #server.ssl.keyStoreType=PKCS12 #server.ssl.keyAlias=rmqcngkey #spring.application.index=true spring.application.name=rocketmq-console spring.http.encoding.charset=UTF-8 spring.http.encoding.enabled=true spring.http.encoding.force=true logging.config=classpath:logback.xml #if this value is empty,use env value rocketmq.config.namesrvAddr NAMESRV_ADDR | now, you can set it in ops page.default localhost:9876q #MQ集羣地址 rocketmq.config.namesrvAddr=192.168.xx.x1:9876;192.168.xx.x2:9876 #if you use rocketmq version < 3.5.8, rocketmq.config.isVIPChannel should be false.default true rocketmq.config.isVIPChannel=true #rocketmq-console's data path:dashboard/monitor rocketmq.config.dataPath=/opt/mqconsole/data #set it false if you don't want use dashboard.default true rocketmq.config.enableDashBoardCollect=true #set the message track trace topic if you don't want use the default one rocketmq.config.msgTrackTopicName= rocketmq.config.ticketKey=ticket #Must create userInfo file: ${rocketmq.config.dataPath}/users.properties if the login is required rocketmq.config.loginRequired=false
-
[0]# cd /opt/rocketmq-externals/rocketmq-console
生成監控包
[0]# mvn clean package -Dmaven.test.skip=true
啓動mqweb管理頁
[0]# nohup java -jar rocketmq-console-ng-1.0.1.jar > log.log 2>&1 &
訪問web頁面:http://xxx.xxx.xxx.xxx:8080/