您好,登錄后才能下訂單哦!
這篇文章主要介紹Hadoop0.20.2集群如何配置,文中介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們一定要看完!
一、hadoop啟動
先格式化一個新的分布式文件系統
$cdhadoop-0.20.2
$bin/hadoopnamenode-format
查看輸出保證分布式文件系統格式化成功。
Hadoop0.20.2集群配置過程中在主節點master上面啟動hadoop,主節點會啟動所有從節點的hadoop。
$bin/start-all.sh
從主節點master關閉hadoop,主節點會關閉所有從節點的hadoop。
$bin/stop-all.sh
Hadoop守護進程的日志寫入到${HADOOP_LOG_DIR}目錄(默認是${HADOOP_HOME}/logs).
瀏覽NameNode和JobTracker的網絡接口,它們的地址默認為:
NameNode-http://master:50070/
JobTracker-http://master:50030/
將輸入文件拷貝到分布式文件系統:$bin/hadoopfs-putconfinput
運行發行版提供的示例程序:$bin/hadoopjarhadoop-0.20.2-examples.jargrepinputoutput'dfs[a-z.]+'
查看輸出文件:
將輸出文件從分布式文件系統拷貝到本地文件系統查看:
$bin/hadoopfs-getoutputoutput
$catoutput/*
或者
在分布式文件系統上查看輸出文件:$bin/hadoopfs-catoutput/*
啟動運行成功后,可以多熟悉熟悉hadoopdfs命令,例如:
hadoopdfs–ls查看/usr/root目錄下的內容,默認如果不填路徑這就是當前用戶路徑;
hadoopdfs–rmrxxxxxx就是刪除目錄;
hadoopdfsadmin-report這個命令可以全局的查看DataNode的情況;
hadoopjob-list后面增加參數是對于當前運行的Job的操作,例如list,kill等;
hadoopbalancer均衡磁盤負載的命令。
以上是“Hadoop0.20.2集群如何配置”這篇文章的所有內容,感謝各位的閱讀!希望分享的內容對大家有幫助,更多相關知識,歡迎關注億速云行業資訊頻道!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。