上一篇快速認識Kafka階段(1)——最詳細的Kafka介紹給大家簡單介紹了消息隊列和kafka的一些基本內容,下面教大家怎樣去安裝部署Kafka集羣哦!!!!!!
碼字不易 先點個贊吧!
1、初始化環境準備
安裝jdk,安裝zookeeper並保證zk服務正常啓動
2、下載安裝包並上傳解壓
node01執行以下命令,下載並解壓
cd /export/softwares
tar –zxvf kafka_2.11-1.0.0.tgz -C /export/servers/
3、node01服務器修改kafka配置文件
node01執行以下命令進入到kafka的配置文件目錄,修改配置文件
node01執行以下命令創建數據文件存放目錄
mkdir -p /export/servers/kafka_2.11-1.0.0/logs
cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
broker.id=0 (每個節點不能相同)
log.dirs=/export/servers/kafka_2.11-1.0.0/logs/
zookeeper.connect=node01:2181,node02:2181,node03:2181
delete.topic.enable=true
host.name=node01 (改成對應的節點)
4、安裝包分發到其他服務器上面去
node01執行以下命令,將node01服務器的kafka安裝包發送到node02和node03服務器上面去
cd /export/servers/
scp -r kafka_2.11-1.0.0/ node02:$PWD
scp -r kafka_2.11-1.0.0/ node03:$PWD
5、node02與node03服務器修改配置文件
node02使用以下命令修改kafka配置文件
cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
broker.id=1 (每個節點不能相同)
log.dirs=/export/servers/kafka_2.11-1.0.0/logs/
zookeeper.connect=node01:2181,node02:2181,node03:2181
delete.topic.enable=true
host.name=node02
node03使用以下命令修改kafka配置文件
cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
broker.id=2 (每個節點不能相同)
log.dirs=/export/servers/kafka_2.11-1.0.0/logs/
zookeeper.connect=node01:2181,node02:2181,node03:2181
delete.topic.enable=true
host.name=node03
6、kafka集羣啓動與停止
注意事項:在kafka啓動前,一定要讓zookeeper啓動起來。
node01執行以下命令將kafka進程啓動在後臺
cd /export/servers/kafka_2.11-1.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
node02執行以下命令將kafka進程啓動在後臺
cd /export/servers/kafka_2.11-1.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
node03執行以下命令將kafka進程啓動在後臺
cd /export/servers/kafka_2.11-1.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
三臺機器也可以執行以下命令停止kafka集羣
cd /export/servers/kafka_2.11-1.0.0
bin/kafka-server-stop.sh