kafka的一些操作命令:
查看所有topic的信息
./kafka-topics.sh --zookeeper 127.0.0.1/kafka --describe
查看某個topic的信息
./kafka-topics.sh --zookeeper 127.0.0.1/kafka --describe --topic mine-topic
創建一個topic 指定備份是3,分區數是6,topic-level配置retention.ms
./kafka-topics.sh --zookeeper 127.0.0.1/kafka --create --partitions 6 --replication-factor 3 --topic mine-topic --config retention.ms=8640000
刪除topic_level配置
./kafka-topics.sh --zookeeper 127.0.0.1/kafka --alter --topic mine-topic --deleteConfig retention.ms
修改分區(注意:目前不支持topic減少分區的數量或改變的備份數)
./kafka-topics.sh --zookeeper 127.0.0.1/kafka --alter --partitions 36 --topic mine-topic
通過zkConnector消費 可以通過命令得到消費量 ,topic最新offset 以及積壓量
./kafka-run-class.sh kafka.tools.ConsumerOffsetChecker -zkconnect 127.0.0.1/kafka -topic mine-topic -group groupname
命令刪除某個topic(這個刪除後,後臺還需要手動刪除kafka數據文件中checkpoint的2個文件中對應的信息,然後刪除zk上config/topics中的信息,必要是要重啓broker,刪除要謹慎),刪除kafka某個topic的數據可以將此topic的topic_level的失效時間先改小數據刪除之後再改大即可。
./kafka-run-class.sh kafka.admin.DeleteTopicCommand --zookeeper 127.0.0.1/kafka --topic mine-topic
在0.8.1版本之後提供了delete topic方法(官方說明發現問題可以給他們反映)
./kafka-topics.sh --zookeeper zk_host:port/chroot --delete --topic my_topic_name