1問題描述
採用傳統的連接方式會出現連接錯誤的問題。
https://www.cnblogs.com/wangbin2188/p/8252717.html
類似這篇文章的內容,會出現連接不上的問題。
2原因
因爲開啓高可用,帶來namenode地址不固定
需求,傳統方法,問題及原因,改進,實驗。
3改進
下載hive配置,放在resource中,clear,修改鏈接,去除連接內容
sc.textFile("/user/atguigu/ods/member.log")
成功!
1問題描述
採用傳統的連接方式會出現連接錯誤的問題。
https://www.cnblogs.com/wangbin2188/p/8252717.html
類似這篇文章的內容,會出現連接不上的問題。
2原因
因爲開啓高可用,帶來namenode地址不固定
需求,傳統方法,問題及原因,改進,實驗。
3改進
下載hive配置,放在resource中,clear,修改鏈接,去除連接內容
sc.textFile("/user/atguigu/ods/member.log")
成功!
01 綜述 Opal 是愛奇藝大數據團隊研發的機器學習平臺,包含特徵生產、樣本構建、模型訓練、模型部署在內的多環節 Bigdata + AI 開發服務,內置多種訓練鏡像、