windows下編譯hadoop-eclipse-plugin-2.10.0.jar

    1)下載編譯插件apache-ant-1.10.7-bin.zip(下載地址https://www.apache.org/dist/ant/binaries/),解壓到D盤
    2)添加環境變量 -> D:\apache-ant-1.10.7-bin\apache-ant-1.10.7\bin;
    3)解壓hadoop-2.10.0.tar.gz(下載地址https://hadoop.apache.org/releases.html)到D:\Java\hadoop\hadoop-2.10.0
    4)添加環境變量 -> D:\Java\hadoop\hadoop-2.10.0\bin;
    5)將hadoop.dll(下載地址https://pan.baidu.com/s/1nuCoe0L)拷貝到C:\Windows\System32目錄下
    6)將winutils.exe(下載地址同上)拷貝到D:\Java\hadoop\hadoop-2.10.0\bin目錄下
    7)下載編譯插件hadoop2x-eclipse-plugin-master.zip(下載地址 https://github.com/winghc/hadoop2x-eclipse-plugin),解壓到D盤
    8)從D:\hadoop2x-eclipse-plugin-master\src\contrib\eclipse-plugin\build.xml中刪除depends="init, ivy-retrieve-common"
    9)在D:\hadoop2x-eclipse-plugin-master\src\contrib\eclipse-plugin\build.xml添加以下內容(解決New Hadoop Location失敗,參考https://www.cnblogs.com/sissie-coding/p/9449941.html):
        <copy file="${hadoop.home}/share/hadoop/common/lib//woodstox-core-5.0.3.jar"  todir="${build.dir}/lib" verbose="true"/>
        <copy file="${hadoop.home}/share/hadoop/common/lib/stax2-api-3.1.4.jar"  todir="${build.dir}/lib" verbose="true"/>
        lib/woodstox-core-5.0.3.jar
        lib/stax2-api-3.1.4.jar
    9)進入D:\hadoop2x-eclipse-plugin-master\src\contrib\eclipse-plugin
    10)執行ant jar -Dhadoop.version=2.10.0 -Declipse.home=D:\Java\spring-tool-suite\sts-bundle\sts-3.9.7.RELEASE -Dhadoop.home=D:\Java\hadoop\hadoop-2.10.0
    11)執行報錯後,修改以下兩個文件中包的版本,使其與D:\Java\hadoop\hadoop-2.10.0\share\hadoop\common\lib中一致
        D:\hadoop2x-eclipse-plugin-master\ivy\libraries.properties
        D:\hadoop2x-eclipse-plugin-master\src\contrib\eclipse-plugin\build.xml


        以下是我修改過的版本(修改後)
        hadoop.version=2.10.0
        commons-collections.version=3.2.2
        htrace.version=4.1.0-incubating
        slf4j-api.version=1.7.25
        slf4j-log4j12.version=1.7.25
        netty.version=3.10.6.Final
        
        <copy file="${hadoop.home}/share/hadoop/common/lib/htrace-core4-${htrace.version}.jar"  todir="${build.dir}/lib" verbose="true"/>
        lib/htrace-core4-${htrace.version}.jar
        
    12)執行成功後,生成的包在D:\hadoop2x-eclipse-plugin-master\build\contrib\eclipse-plugin下
    13)將hadoop-eclipse-plugin-2.10.0.jar拷貝到D:\Java\spring-tool-suite\sts-bundle\sts-3.9.7.RELEASE\plugins
    14)重啓eclipse,在Project Explorer界面可以看到DFS Location
    15)在windows -> preferences -> hadoop 添加Hadoop安裝目錄
    16)在show view中打開Map/Reduce Locations,New Hadoop Location,彈出窗口,搞定

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章