91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

hbase尋址機制的示例分析

發布時間:2021-12-09 10:40:16 來源:億速云 閱讀:198 作者:小新 欄目:大數據

小編給大家分享一下hbase尋址機制的示例分析,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

hbase尋址機制詳解

系統如何找到某個row key(或者某個row key range(范圍))所在的region big table 使用三層類似B+樹的結構來保存region 位置
第一層是保存zookeeper 里面的文件,它持有root region 的位置。
第二層root region 是.META.表的第一個region 其中 保存了.META.z表 其它region 的位置。通過root region,我們就可以訪問.META.表的數據。
.META.是第三層,它是一個特殊的表,保存了hbase 中所有數據表的region 位置信息。
//見圖

hbase尋址機制的示例分析

說明:
1 root region 永遠不會被split,保證了最需要三次跳轉,就能定位到任意region 。
2.META.表每行保存一個region 的位置信息,row key 采用表名+表的最后一樣編碼而成。
3 為了加快訪問,.META.表的全部region 都保存在內存中。
假設,.META.表的一行在內存中大約占用1KB。并且每個region 限制為128MB。
那么上面的三層結構可以保存的region 數目為:
(128MB/1KB) * (128MB/1KB) = = 2(34)個region
4 client 會將查詢過的位置信息保存緩存起來,緩存不會主動失效,因此如果client 上的緩存全部失效,則需要進行6 次網絡來回,才能定位到正確的region(其中三次用來發現緩存失效,另外三次用來獲取位置信息)。

從上面的路徑我們可以看出,用戶需要 3 次請求才能直到用戶 Table 真正的位置,這在一定 程序帶來了性能的下降。在 0.96 之前使用 3 層設計的主要原因是考慮到元數據可能需要很 大。但是真正集群運行,元數據的大小其實很容易計算出來。在 BigTable 的論文中,每行 METADATA 數據存儲大小為 1KB 左右,如果按照一個 Region 為 128M 的計算,3 層設計可以支持的 Region 個數為 2^34 個,采用 2 層設計可以支持 2^17(131072)。那么 2 層設計的情 況下一個集群可以存儲 4P 的數據。這僅僅是一個 Region 只有 128M 的情況下。如果是 10G 呢? 因此,通過計算,其實 2 層設計就可以滿足集群的需求。因此在 0.96 版本以后就去掉 了-ROOT-表了。

提示:更具版本的不同,分為老的尋址地址方式,和新的尋址方式

以上是“hbase尋址機制的示例分析”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

蓬莱市| 大兴区| 余庆县| 霍林郭勒市| 无为县| 乐亭县| 临安市| 萨嘎县| 集安市| 沁水县| 汕头市| 阿坝| 安阳县| 崇礼县| 凤山县| 平阳县| 顺平县| 沙湾县| 吉林市| 绵竹市| 保亭| 富裕县| 巨鹿县| 虎林市| 和平区| 巴青县| 清镇市| 乌鲁木齐市| 阿拉善左旗| 新昌县| 交城县| 河西区| 新兴县| 临清市| 阿勒泰市| 乌兰浩特市| 巍山| 胶南市| 运城市| 五指山市| 合水县|