91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

HDFS Namenode是怎么組成的

發布時間:2021-12-09 11:11:59 來源:億速云 閱讀:296 作者:小新 欄目:云計算

這篇文章主要介紹了HDFS Namenode是怎么組成的,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。

1.Namenode組成

    fsimage鏡像文件包含了整個HDFS文件系統的所有目錄和文件的indoe信息。對于文件來說包括了數據塊描述信息、修改時間、訪問時間等;對于目錄來說包括修改時間、訪問權限控制信息(目錄所屬用戶,所在組等)等。

    edit文件主要是在NameNode已經啟動情況下對HDFS進行的各種更新操作進行記錄,HDFS客戶端執行所有的寫操作都會被記錄到edit文件中。

2. 1.X的SecondaryNamenode

     HDFS Namenode是怎么組成的

  • secondarynamenode通知namenode生成新的日志文件(edits.new),以后的日志都寫到新的日志文件中。

  • secondarynamenode用http get從元數據節點獲得fsimage文件及舊的日志文件(edits)。

  • secondarynamenode將fsimage文件加載到內存中,并執行日志文件(edits)中的操作,然后生成新的fsimage文件。

  • secondarynamenode將新的fsimage文件用http post傳回namenode.

  • namenode可以將舊的fsimage文件及舊的日志文件(edits),換為新的fsimage文件和新的日志文件(第一步生成的)(edits.new -> edits),然后更新fstime文件,寫入此次checkpoint的時間。

  • 這樣元數據節點中的fsimage文件保存了最新的checkpoint的元數據信息,日志文件也重新開始,不會變的很大了。 

通過上面的步驟能有效減少edits文件的大小從而減少每次啟動執行merge的時間。

注:http://p-x1984.iteye.com/blog/860290

3.2.X的HA和merge(NFS和JQM)

NFS,shared NN EDITS LOG

HDFS Namenode是怎么組成的

感謝你能夠認真閱讀完這篇文章,希望小編分享的“HDFS Namenode是怎么組成的”這篇文章對大家有幫助,同時也希望大家多多支持億速云,關注億速云行業資訊頻道,更多相關知識等著你來學習!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

礼泉县| 新民市| 黄山市| 扶绥县| 赣州市| 慈利县| 柘城县| 新蔡县| 深州市| 马山县| 丹东市| 张家界市| 玉龙| 花莲县| 行唐县| 卫辉市| 江川县| 徐水县| 浦江县| 卢氏县| 泸州市| 萨迦县| 西城区| 平罗县| 乌审旗| 保亭| 汉阴县| 巨鹿县| 若羌县| 文安县| 南投市| 鲁甸县| 保靖县| 肇庆市| 古田县| 红桥区| 南川市| 庆安县| 伊吾县| 黄浦区| 合江县|