溫馨提示×
您好，登錄后才能下訂單哦！
點擊 登錄注冊 即表示同意《億速云用戶服務條款》
您好，登錄后才能下訂單哦！
這篇文章將為大家詳細講解有關HDFS集群有多少種節點，小編覺得挺實用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。
HDFS集群有兩種節點，以管理者-工作者的模式運行，即一個名稱節點(管理者)和多個數據節點(工作者)。名稱節點管理文件系統的命名空間。它維護著這個文件系統樹及這個樹內所有的文件和索引目錄。這些信息以兩種形式將文件永久保存在本地磁盤上：命名空間鏡像和編輯日志。名稱節點也記錄著每個文件的每個塊所在的數據節點，但它并不永久保存塊的位置，因為這些信息會在系統啟動時由數據節點重建。
客戶端代表用戶通過與名稱節點和數據節點交互來訪問整個文件系統。客戶端提供一個類似POSIX(可移植操作系統界面)的文件系統接口，因此用戶在編程時并不需要知道名稱節點和數據節點及其功能。
數據節點是文件系統的工作者。它們存儲并提供定位塊的服務(被用戶或名稱節點調用時)，并且定時的向名稱節點發送它們存儲的塊的列表。
沒有名稱節點，文件系統將無法使用。事實上，如果運行名稱節點的機器被毀壞了，文件系統上所有的文件都會丟失，因為我們無法知道如何通過數據節點上的塊來重建文件。因此，名稱節點能夠經受故障是非常重要的，Hadoop提供了兩種機制來確保這一點。
第一種機制就是復制那些組成文件系統元數據持久狀態的文件。Hadoop可以通過配置使名稱節點在多個文件系統上寫入其持久化狀態。這些寫操作是具同步性和原子性的。一般的配置選擇是，在本地磁盤上寫入的同時，寫入一個遠程NFS掛載(mount)。
另一種可行的方法是運行一個二級名稱節點，雖然它不能作為名稱節點使用。這個二級名稱節點的重要作用就是定期的通過編輯日志合并命名空間鏡像，以防止編輯日志過大。這個二級名稱節點一般在其他單獨的物理計算機上運行，因為它也需要占用大量CPU和內存來執行合并操作。它會保存合并后的命名空間鏡像的副本，在名稱節點失效后就可以使用。但是，二級名稱節點的狀態是比主節點滯后的，所以主節點的數據若全部丟失，損失仍在所難免。在這種情況下，一般把存在NFS上的主名稱節點元數據復制到二級名稱節點上并將其作為新的主名稱節點運行。
關于“HDFS集群有多少種節點”這篇文章就分享到這里了，希望以上內容可以對大家有一定的幫助，使各位可以學到更多知識，如果覺得文章不錯，請把它分享出去讓更多的人看到。
免責聲明：本站發布的內容（圖片、視頻和文字）以原創、轉載和分享為主，文章觀點不代表本網站立場，如果涉及侵權請聯系站長郵箱：is@yisu.com進行舉報，并提供相關證據，一經查實，將立刻刪除涉嫌侵權內容。
