91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Redis如何節約內存

發布時間:2022-01-05 17:52:34 來源:億速云 閱讀:103 作者:小新 欄目:大數據

這篇文章給大家分享的是有關Redis如何節約內存的內容。小編覺得挺實用的,因此分享給大家做個參考,一起跟隨小編過來看看吧。

首先,這個通過圖片ID反查用戶UID的應用有以下幾點需求:

  • 查詢速度要足夠快

  • 數據要能全部放到內存里,最好是一臺EC2的 high-memory 機型就能存儲(17GB或者34GB的,68GB的太浪費了)

  • 支持持久化,這樣在服務器重啟后不需要再預熱

首先否定了數據庫存儲的方案,他們保持了KISS原則(Keep It Simple and Stupid),因為這個應用根本用不到數據庫的update功能,事務功能和關聯查詢等等牛X功能,所以不必為這些用不到的功能去選擇維護一個數據庫。

于是他們選擇了Redis,Redis是一個支持持久化的內存數據庫,所有的數據都被存儲在內存中(忘掉VM吧),而最簡單的實現就是使用Redis的String結構來做一個key-value存儲就行了。像這樣:

SET media:1155315 939
GET media:1155315
> 939

其中1155315是圖片ID,939是用戶ID,我們將每一張圖片ID為作key,用戶uid作為value來存成key-value對。然后他們進行 了測試,將數據按上面的方法存儲,1,000,000數據會用掉70MB內存,300,000,000張照片就會用掉21GB的內存。對比預算的17GB 還是超支了。

NoSQLFan:其實這里我們可以看到一個優化點,我們可以將key值前面相同的media去掉,只存數字,這樣key的長度就減少了,減少key值對內存的開銷【注:Redis的key值不會做字符串到數字的轉換,所以這里節省的,僅僅是media:這6個字節的開銷】。經過實驗,內存占用會降到50MB,總的內存占用是15GB,是滿足需求的,但是Instagram后面的改進任然有必要)

于是Instagram的開發者向Redis的開發者之一Pieter Noordhuis詢問優化方案,得到的回復是使用Hash結構。具體的做法就是將數據分段,每一段使用一個Hash結構存儲,由于Hash結構會在單個Hash元素在不足一定數量時進行壓縮存儲,所以可以大量節約內存。這一點在上面的String結構里是不存在的。而這個一定數量是由配置文件中的hash-zipmap-max-entries參數來控制的。經過開發者們的實驗,將hash-zipmap-max-entries設置為1000時,性能比較好,超過1000后HSET命令就會導致CPU消耗變得非常大。

于是他們改變了方案,將數據存成如下結構:

HSET "mediabucket:1155" "1155315" "939"
HGET "mediabucket:1155" "1155315"
> "939"

通過取7位的圖片ID的前四位為Hash結構的key值,保證了每個Hash內部只包含3位的key,也就是1000個。

再做一次實驗,結果是每1,000,000個key只消耗了16MB的內存。總內存使用也降到了5GB,滿足了應用需求。

(NoSQLFan: 同樣的,這里我們還是可以再進行優化,首先是將Hash結構的key值變成純數字,這樣key長度減少了12個字節,其次是將Hash結構中的 subkey值變成三位數,這又減少了4個字節的開銷,如下所示。經過實驗,內存占用量會降到10MB,總內存占用為3GB)

HSET "1155" "315" "939"
HGET "1155" "315"
> "939"

感謝各位的閱讀!關于“Redis如何節約內存”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,讓大家可以學到更多知識,如果覺得文章不錯,可以把它分享出去讓更多的人看到吧!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

乾安县| 乌海市| 渝中区| 台中市| 如东县| 青铜峡市| 凯里市| 航空| 玛纳斯县| 剑河县| 林州市| 浮梁县| 突泉县| 苍溪县| 镇赉县| 灵台县| 芦溪县| 永福县| 日照市| 永仁县| 朔州市| 新乡县| 建始县| 积石山| 弥勒县| 晋中市| 闽侯县| 邵武市| 宜春市| 内乡县| 济南市| 怀集县| 京山县| 铅山县| 祁门县| 蛟河市| 和林格尔县| 灵武市| 长子县| 四会市| 张北县|