開始Spark之旅。Spark是客戶端和服務端的架構,從體系架構開始學習:
客戶端:Driver Program , 核心是創建一個對象sc(SpringContext)
服務端:主節點Cluster manager ; 從節點 Worker , Executor負責執行任務
一個簡單的架構圖:
開始Spark之旅。Spark是客戶端和服務端的架構,從體系架構開始學習:
客戶端:Driver Program , 核心是創建一個對象sc(SpringContext)
服務端:主節點Cluster manager ; 從節點 Worker , Executor負責執行任務
一個簡單的架構圖: