寫了一個簡單的wordCount程序,本地可以運行的。打包提交到集羣上就報錯
Exception in thread "main" org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory hdfs://hadoop1:9000/usr/hadoop/input/input.txt already exists
程序需要兩個參數,輸入和輸出路徑。報錯說的是這個文件已存在,可是他報錯的路徑明明是我的輸入路徑啊。
仔細檢查了代碼,甚至重寫了。本地還是可以運行,提交就是不對。仔細覈對了參數還是沒問題。
最後無賴的上傳了一個沒有依賴的jar包,沒想到問題就解決了。之前上傳的是有依賴的jar包。
雖然問題解決了,但還是想不通。。。。。。難道兩份一樣的包會產生衝突???
hadoop提交有依賴的jar包出錯
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
安全分析:國內一些常見的汽車保險欺詐案件
原創
2024-05-22 00:17:52
5月21日相聚上海張江!與文心大模型一起共建大模型產業應用生態圈
原創
2024-05-17 00:28:21
白鯨開源CEO郭煒在2024 DataOps發展大會上獲聘專家
原創
2024-05-16 11:28:50
2024數據標註公司20強排行榜(附榜單)
原創
2024-05-16 02:09:44
企業大模型如何成爲自己數據的“百科全書”?
原創
2024-05-15 21:22:50
多點 Dmall x TiDB:出海多雲多活架構下的 TiDB 運維實戰
原創
2024-05-15 10:48:37
神策數據付力力入選福布斯中國 30 Under 30 十週年名人堂
原創
2024-05-14 21:51:58
企業IT架構治理之道
京東雲開發者
2024-05-13 23:59:32
內嵌專業接口的RISC-V架構MCU,誰家有?
osc_04b0bwu2
2024-05-13 23:26:39
免費報名|Zabbix受邀出席上海開源技術沙龍,探討開源軟件賦能新質生產力
Zabbix中國
2024-05-13 22:34:43
神策數據:詳解保險 OMO 一體化的關鍵步驟
原創
2024-05-11 22:04:29
CDH配置Kerberos和Sentry詳解
原創
2024-05-20 21:36:31
高效調度新篇章:詳解DolphinScheduler 3.2.0生產級集羣搭建
原創
2024-05-15 21:22:54
14 hive安裝
osc_pjx77r92
2024-05-14 00:41:14