91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

HDFS架構如何設計

發布時間:2021-12-09 11:27:18 來源:億速云 閱讀:94 作者:小新 欄目:大數據

這篇文章主要介紹HDFS架構如何設計,文中介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們一定要看完!

HDFS架構設計:
1.NN(NameNode):主要是維護管理文件命名空間,其中包括了文件名稱,文件的權限,創建時間,副本數,文件被分成多少塊,快分布在哪些機器(產生文件fsimage和editlog)。

2.理解NN管理下NN和塊以及實際存儲內容的存儲關系。
實例:假設NN為一個容量為128000ML的正方形盒子,每個塊為同樣大小正正方方的容量為128ML的盒子,但是每個盒子里只有3ml的水(每個塊中存儲文件的實際大小)。

則問實際存儲的內容是多少ml?3*(128000/128)=3000ml這里是由DN管理存儲的。
放進去的盒子是多少個?1000個(其實就是存儲的塊的數量)
總的來說盡管實際存儲只有3000ml,但是卻消耗了1000個瓶子的名字的字節總和的NN的空間,但是如果把1000個瓶子壓縮成500或者更少(小文件合并),則可以消耗更少量的NN管理空間。

3.DN(DataNode):存儲數據塊,存儲數據塊校驗和。


4.SN(SecondaryNode):做每小時的檢查工作checkpoint。(檢查NN的工作即產生文件fsimage和editlog并進行打包制作成新的fsimage文件保存下來)

圖理解:HDFS架構如何設計

以上是“HDFS架構如何設計”這篇文章的所有內容,感謝各位的閱讀!希望分享的內容對大家有幫助,更多相關知識,歡迎關注億速云行業資訊頻道!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

化德县| 蒙山县| 博客| 洪雅县| 小金县| 岳阳县| 阳新县| 乌拉特后旗| 加查县| 建德市| 沽源县| 庆云县| 深州市| 大田县| 中江县| 张掖市| 满城县| 始兴县| 富蕴县| 黄石市| 从化市| 南溪县| 云浮市| 栾川县| 瓮安县| 禹城市| 洪泽县| 扎鲁特旗| 静安区| 新郑市| 通化县| 金平| 稻城县| 塔河县| 洛扎县| 鹤岗市| 普洱| 永顺县| 曲周县| 汝城县| 东山县|