消費 kafka 數據時剛開始可以穩定跑一會,但是過不了幾分鐘就跑出此異常程序中斷,java.lang.IllegalStateException: No current assignment for partition
解決:是因爲我在集羣上跑着消費程序,本地也在用相同的消費代碼測試,結果就出現了同一個 groupID 在同一時刻多次消費同一個 topic,引發 offset 記錄問題。
spark streaming 消費 kafka 數據時報 Java .lang.IllegalStateException: No current assignment for partition
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
Kafka技術知識總結之三——Kafka 高效文件存儲設計
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之九——Kafka消息壓縮與日誌壓縮
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之六——Kafka負載均衡策略
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之五——Kafka的高可用性
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之八——Kafka生產者結構
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之二——Kafka事務
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之七——Kafka磁盤存儲
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之四——Kafka 再均衡
琦小虾
2020-07-08 09:16:27
Kafka技術知識總結之一——Kafka 的元素,組成,架構
琦小虾
2020-07-08 09:16:27
ZooKeeper 一致性協議 ZAB 原理,瞭解一下
毛发旺盛的程序员
2020-07-08 12:27:20
Kafka 集羣環境搭建
序言 說明下安裝環境.在centos7上安裝Kafka集羣環境. Kafka 依賴Java環境,所以需要提前配置.Kafka有自帶的Zookeeper,但是一般不用. Zookeeper集羣
cuiyaonan2000
2020-07-08 12:24:19
flink讀kafka報錯:Undefined offset with no reset policy for partitions
ASN_forever
2020-07-08 10:43:26
基於docker搭建zookeeper集羣、kafka集羣(多臺真機之間的集羣)
基於docker搭建zookeeper集羣、kafka集羣---二(多臺真機之間的集羣)
超级大超越
2020-07-08 09:04:39
【kafka】爲什麼快(why‘s kafka so fast)?
lsr40
2020-07-08 08:30:23