SparkStreaming的Receiver方式和直連方式的區別

Receiver接收固定時間間隔的數據(放在內存中),使用Kafka高級的API,自動維護偏移量,達到固定的時間才處理,效率低且容易丟失數據;

Direct直連方式,相當於直接連接到Kafka分區上,使用Kafka底層的API,需要自己維護偏移量,效率高。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章