版權聲明:本文爲博主原創文章,遵循 CC 4.0 BY-SA 版權協議,轉載請附上原文出處鏈接和本聲明。
本文鏈接:https://blog.csdn.net/q383965374/article/details/79428818
遇到的問題
我們的hadoop集羣在運作過程中部分節點報錯local-dirs are bad
原因
hadoop集羣硬盤目錄默認的使用閾值是90%
空間不足,目錄使用率超過閾值了90%了
解決方式
調整yarn的參數
yarn.nodemanager.disk-health-checker.max-disk-utilization-per-disk-percentage
把比例調高到98%
但是這種方式治標不治本,最好還是清理hadoop集羣的空間,騰出硬盤空間。
https://discuss.pivotal.io/hc/en-us/articles/230700528-YARN-Alerts-NodeManager-is-unhealthy-local-dirs-are-bad
————————————————
版權聲明:本文爲CSDN博主「張小凡vip」的原創文章,遵循 CC 4.0 BY-SA 版權協議,轉載請附上原文出處鏈接及本聲明。
原文鏈接:https://blog.csdn.net/zzq900503/article/details/79428818