Kafka Monitor安裝介紹

Kafka Monitor是kafka的監控工具，安裝簡單，頁面簡單，主要是用來監控消費者和offset，對kafka集羣的支持較少

下載鏈接

kafka監控工具KafkaOffsetMonitor.rar

上傳jar包

mkdir kafka-offset-monitor
cp KafkaOffsetMonitor-assembly-0.4.6-SNAPSHOT.jar /usr/local/bigdata/kafka-offset-monitor/

cd kafka-offset-monitor

創建目錄

mkdir mobile-logs
chmod 777 mobile-logs

創建啓動腳本

vi start-kafka-offset-monitor.sh
chmod 777 start-kafka-offset-monitor.sh

#!/bin/bash
java -cp KafkaOffsetMonitor-assembly-0.4.6-SNAPSHOT.jar \
com.quantifind.kafka.offsetapp.OffsetGetterWeb \
--offsetStorage kafka \
--kafkaBrokers 192.168.199.100:9092 \
--kafkaSecurityProtocol PLAINTEXT \
--zk 192.168.199.100:2181 \
--port 8086 \
--refresh 10.seconds \
--retain 2.days \
--dbName offsetapp_kafka &

• 挺奇怪的，我的單機版kafka用主機名連不上，原因暫時未知，在排查

offsetStorage 老版本是存的zookeeper，現在建議用kafka
kafkaSecurityProtocol 是明文協議
refresh 多長時間刷新
retain 日誌保留時間
port 端口別重複就行

訪問8086

consumer groups是當前的消費者組

我們點進去看一下，發現有消費的topic的信息，包括topic的LEO和消費者提交的offset值

我們看一下topic list

我測試的，只創建了了一個mytopic

點進去可以看到很多監控指標

查看kafka集羣

查看topic和consumer的關係