Flume與Kafka比較

** Flume Kafka
功能 側重日誌採集 側重日誌緩存
實現 管道流 消息隊列
傳輸方式 push-based pull-based
持久行爲 傳輸後的日誌不保存 傳輸後的日誌不刪除
模型 source-channel-sink producer-broker-consumer
可靠性 持久化的channel或者冗餘拓撲,無副本 通過副本保證高可靠性
流處理 有攔截器 通過外部的流處理系統
適合場景 直接日誌採集或者寫入Hadoop/HDFS的sink 大吞吐量高可用性,有很多消費者訂閱
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章