大數據開發之kafka安裝

安裝kafka前需要安裝zookeeper，參考https://blog.csdn.net/weixin_44772799/article/details/99545064

 

一、按需求下載kafka並傳到centos

 

二、解壓安裝包

[root@hlh001 software]# tar -zxvf kafka_2.11-0.11.0.0.tgz -C /opt/module/

三、修改解壓後的名稱

[root@hlh001 module]# mv kafka_2.11-0.11.0.0/ kafka

四、在kafka文件中建logs文件

[root@hlh001 kafka]# mkdir logs

五、修改配置文件

[root@hlh001 config]# vim server.properties

 

	#全局唯一編號，不能重複 broker.id=0   #刪除topic功能 delete.topic.enable=true # kafka運行日誌存放的路徑 log.dirs=/opt/module/kafka/logs #配置連接Zookeeper集羣地址 zookeeper.connect=hlh001:2181,hlh002:2181,hlh003:2181

 

 

 

 

 

 

 

 

六、配置環境變量

[root@hlh001 config]# vim /etc/profile

#kafkahome

export KAFKA_HOME=/opt/module/kafka

export PATH=$PATH:$KAFKA_HOME/bin

[root@hlh003 config]# source /etc/profile

七、啓動集羣

先啓動zookeeper: [root@hlh003 bin]# ./zkServer.sh start

[root@hlh001 bin]# kafka-server-start.sh ../config/server.properties &

八、查看進程

[root@hlh003 ~]# jps

4705 Kafka

4343 QuorumPeerMain

5050 Jps

九、停止集羣

[root@hlh001 bin]# kafka-server-stop.sh stop