您好,登錄后才能下訂單哦!
本篇內容主要講解“如何測試Hadoop分布式集群環境”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“如何測試Hadoop分布式集群環境”吧!
首先在通過Master節點格式化集群的文件系統:
輸入“Y”完成格式化:
格式化完成以后,我們啟動hadoop集群
我們在嘗試一下停止Hadoop集群:
此時出現了“no datanode to stop”的錯誤,出現這種錯誤的原因如下:
每次使用 “hadoop namenode -format”命令格式化文件系統的時候會出現一個新的namenodeId,而我我們在搭建Hadoop單機偽分布式版本的時候往我們自己創建的tmp目錄下放了數據,現在需要把各臺機器上的“/usr/local/hadoop/hadoop-1.2.1/”下面的tmp及其子目錄的內容清空,于此同時把“/tmp”目錄下的與hadoop相關的內容都清空,最后要把我們自定義的hdfs文件夾中的data和name文件夾中的內容清空:
把Slave1和Slave2中同樣的內容均刪除掉。
重新格式化并重新啟動集群,此時進入Master的Web控制臺:
此時可以看到Live Nodes只有三個,這正是我們預期的,因為我們Master、Slave1、Slave2都設置成為了DataNode,當然Master本身同時也是NameNode。
此時我們通過JPS命令查看一下三臺機器中的進程信息:
發現Hadoop集群的各種服務都正常啟動。
至此,Hadoop集群構建完畢。
到此,相信大家對“如何測試Hadoop分布式集群環境”有了更深的了解,不妨來實際操作一番吧!這里是億速云網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續學習!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。