您好,登錄后才能下訂單哦!
這篇文章主要為大家展示了“Hadoop報錯怎么辦”,內容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領大家一起研究并學習一下“Hadoop報錯怎么辦”這篇文章吧。
??顯然這是沒有設置JAVA_HOME環境變量引起的。但是在設置了JAVA_HOME環境變量后仍報這個錯誤。 啟動腳本無法讀到這個環境變量,查資料后,通過在$HADOOP_HOME/libexec/hadoop-config.sh中加入export JAVA_HOME=/PATH/TO/JDK后解決。?
?
為何腳本不能讀取系統設置的JAVA_HOME環境變量,還需要研讀啟動腳本來找到原因。?
執行./start-all.sh啟動hadoop集群時報WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
本地庫不存在,或者本地庫與當前操作系統的版本不一致的時候會報這個錯誤。hadoop官網下載的hadoop版本帶的native庫文件是32位的。 如果部署在64bit系統上,需要重新編譯來解決。另外遇到過重新編譯64位native庫文件后仍然報這個錯誤,執行bash -x start-all.sh,跟蹤報錯原因,有發現啟動時在$HADOOP_HOME/lib目錄中尋找native庫文件,而native庫文件默認存放在$HADOOP_HOME/lib/native目錄中。暫時把庫文件拷貝到lib目錄下解決了該問題。不過正確的應該是通過定義native庫文件路徑的方式來解決,具體定義的位置沒有找到。等找到后補上。
原因:namenode、datanode節點主機系統時間不一致引起
解決:配置ntp服務,定時同步時鐘,使集群各節點服務器時間保持一致。
以上是“Hadoop報錯怎么辦”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。