linux環境下在eclipse創建maven項目訪問hadoop文件系統的文件

1.在linux系統中打開eclipse

2.新建一個maven項目



一路next,填寫group id和artifact id 點擊finish結束。

3:在左邊的項目欄中找到pom.xml文件,在這裏要添加配置來爲項目開始hadoop相關的jar包




在pom.xml文件中的dependencies塊中添加紅色方框中的配置信息。按ctrl +s保存文件退出

4.在項目文件夾中創建/src/main/resources文件夾



5.創建/src/main/resources文件夾後,指定這個文件夾的輸出路徑





一路ok,完成輸出路徑的指定。

6.將hadoop包中的core-site.xml文件複製到src/main/resources中(也就是我們剛纔創建的文件):

打開linux 終端,定位到hadoop文件夾下/etc/hadoop/ 找到core-site.xml文件,將該文件複製到src/main/resources下,這個文件夾一般在home目錄中user/workspace/HDFS_TEST中,這裏HDFS_TEST是項目名稱。

示例代碼:

cd /opt/modules/hadoop-2.5.0-cdh5.3.6/etc/hadoop

cp core-site.xml ~/workspace/HDFS_TEST/src/main/resources/


7.回到eclipse工作界面中運行腳本,即可訪問hadoop文件系統中的文件


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章