** | Flume | Kafka |
---|---|---|
功能 | 側重日誌採集 | 側重日誌緩存 |
實現 | 管道流 | 消息隊列 |
傳輸方式 | push-based | pull-based |
持久行爲 | 傳輸後的日誌不保存 | 傳輸後的日誌不刪除 |
模型 | source-channel-sink | producer-broker-consumer |
可靠性 | 持久化的channel或者冗餘拓撲,無副本 | 通過副本保證高可靠性 |
流處理 | 有攔截器 | 通過外部的流處理系統 |
適合場景 | 直接日誌採集或者寫入Hadoop/HDFS的sink | 大吞吐量高可用性,有很多消費者訂閱 |
Flume與Kafka比較
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
N網下載mod方法: 20240614親測好使
https://www.bilibili.com/video/BV1k8411575T/?vd_source=d68ed178f151e80fea1e02efd205802c