kafka的部署及錯誤排除

kafka部署

1.在/home/storm/目錄下新建kafka目錄存放軟件包,解壓軟件
mkdir kafka
unzip kafka_2.9.2-0.8.1.1.storm.zip

2.修改配置文件server.properties：

cd kafka/kafka_2.9.2-0.8.1.1/config

broker.id=0
host.name=192.168.1.142(自己的ip)
zookeeper.connect=192.168.1.142:2181可逗號分隔配置多個

修改配置文件vim log4j.properties
log4j.appender.D.File = /home/storm/kafka/kafka_2.9.2-0.8.1.1/logs/debug.log
log4j.appender.E.File = /home/storm/kafka/kafka_2.9.2-0.8.1.1/logs/error.log

4.確保bin、sbin有執行權限

chmod +x * 

5.啓動kafka服務:

sbin/start-kafka.sh 
查看是否啓動： jsp -l


6.創建topic主題：
bin/kafka-topics.sh --create --zookeeper 192.168.1.142:2181 --replication-factor 1 --partitions 1 --topic topic-002-test  （IP不能改成主機名，但可以使用127.0.0.1）

啓動productor:

bin/kafka-console-producer.sh --broker-list 192.168.1.142:9092 --topic topic-002-test

啓動consumer:
bin/kafka-console-consumer.sh --zookeeper 192.168.1.142:2181 --topic topic-002-test

在productor端輸入，看consumer端的輸出。

錯誤排除：

1.代碼一定不要敲錯，我出現多次錯誤，報錯是 缺少zookeeper必須參數和缺少topic必須參數

2.端口不要寫錯，若是有錯誤不妨看看端口是否正確

netstat -ant |grep 9092(端口號)