您好,登錄后才能下訂單哦!
本篇內容主要講解“Hbase內存分配與集群規劃的方法是什么”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“Hbase內存分配與集群規劃的方法是什么”吧!
一個regionserver只能有一個BlockCache。
讀多寫少型 BucketCache。
寫多讀少型 LRUBlockCache。
注:使用BucketCache還是使用LRUBlockCache,只和分配給RegionServer的內存大小有關。一般而言,如果HBASE_HEAPSIZE > 20G,選擇BucketCache,否則選擇LRUBlockCache。
硬性規定:LRUBlockCache + MemStore < 80% * JVM_HEAP,即留出20%的空間,否則RS無法啟動。
默認分配給MemStore和BlockCache的JVM內存比例均為0.4
默認的hbase.hregion.memstore.flush.size =128M,即每個MemStore大小為128M,所以一個regionserver所能支持的最大region就可以計算出來
JVM_HEAP_SIZE * 0.4 / 128M / 列族個數
如果寫很重的場景下,可以適當調高hbase.regionserver.global.memstore.size,這樣可以容納更多的region數量。建議分配合理的region數量,根據寫請求量的情況,一般20-200個之間,可以提高集群穩定性,排除很多不確定的因素,提升讀寫性能。
通常較少的region可使集群運行的更加平穩,官方指出,每個regionServer大約100個regions的時候效果最佳,設計表的時候應該盡量減少列族
每個region最佳大小5-10GB
到此,相信大家對“Hbase內存分配與集群規劃的方法是什么”有了更深的了解,不妨來實際操作一番吧!這里是億速云網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續學習!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。