hadoop1.x 和 hadoop2.x版本在yarn 方面的區別

  1. hadoop1.x 版本架構如下
    hdfs+MapReduce,hdfs 沒問題,mapreduce 有以下缺點
    在這裏插入圖片描述
  2. 針對mapreduce 以上的缺點,以及在1.X 版本中JobTracker既要負責資源調度又要負責任務調度,hadoop2.x MapReduce將JobTracker中的資源管理及任務生命週期管理(包括定時觸發及監控),拆分成兩個獨立的組件,並更名爲YARN(Yet Another Resource Negotiator)。

在這裏插入圖片描述
3. hadoop2.x 目前缺點
運行比較慢
算子少相當與只有map 和reduce 算子
中間結果落地磁盤,迭代運算不適合速度較慢

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章