Eclipse上Hadoop插件中Run On Hadoop原理

對run on hadoop終於有個瞭解了:它不是把jar包發送到hadoop上去運行,而只是使用了hadoop上的hdfs,從hdfs中獲取文件,至於執行,是執行你本地的hadoop包來運行你編寫的MapReduce程序,所以Hadoop集羣中不用啓動JobTracker也可以運行。

這點你可以通過觀察hadoop的JobTracker頁面並無記錄來得到證實

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章