| 數據處理方式 | 組件 |
|---|---|
| 實時流數據採集 | flume,kafka |
| 實時流數據處理 | sparkStreaming,storm |
| 實時數據查詢處理 | impala |
| 批數據導入導出 | Sqoop |
| 批數據查詢處理 | hive |
大數據常用數據處理框架
發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
愛奇藝數據湖實戰 - 實時湖倉一體化
01 概述 數據是洞察用戶、市場、運營決策的基礎資料，在愛奇藝被廣泛應用在推薦、廣告、用戶增長、營銷等場景中。愛奇藝大數據業務之前採用 Lambda 架構，滿足海量