您好,登錄后才能下訂單哦!
這篇文章主要介紹了Redis如何綁定CPU,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
Redis 6.0 開始支持綁定 CPU,可以有效減少線程上下文切換。
CPU 親和性(CPU Affinity)是一種調度屬性,它將一個進程或線程,「綁定」到一個或一組 CPU 上。也稱為 CPU 綁定。
設置 CPU 親和性可以一定程度避免 CPU 上下文切換,提高 CPU L1、L2 Cache 命中率。
早期「SMP」架構下,每個 CPU 通過 BUS 總線共享資源。CPU 綁定意義不大。
而在當前主流的「NUMA」架構下,每個 CPU 有自己的本地內存。訪問本地內存有更快的速度。而訪問其他 CPU 內存會導致較大的延遲。這時,CPU 綁定對系統運行速度的提升有較大的意義。
現實中的 NUMA 架構比上圖更復雜,通常會將 CPU 分組,若干個 CPU 分配一組內存,稱為 「node」。
你可以通過 「numactl -H 」 命令來查看 NUMA 硬件信息。
$ numactl -H available: 2 nodes (0-1)node 0 cpus: 0 2 4 6 8 10 12 14 16 18 20 22 24 26 28 30 32 34 36 38 node 0 size: 32143 MB node 0 free: 26681 MB node 1 cpus: 1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 31 33 35 37 39 node 1 size: 32309 MB node 1 free: 24958 MB node distances: node 0 1 0: 10 21 1: 21 10
上圖中可以得知該機器有 40 個 CPU,分組為 2 個 node。
node distances 是一個二維矩陣,表示 node 之間 「訪問距離」,10 為基準值。上述命令中可以得知,node 自身訪問,距離是 10。跨 node 訪問,如 node 0 訪問 node 1 距離為 21。說明該機器「跨 node 訪問速度」比「node 自身訪問速度」慢 2.1 倍。
其實,早在 2015 年,有人提出 Redis 需要支持設置 CPU 親和性,而當時的 Redis 還沒有支持 IO 多線程,該提議擱置。
而 Redis 6.0 引入 IO 多線程。同時,也支持了設置 CPU 親和性。
我畫了一張 Redis 6.0 線程家族供你參考。
上圖可分為 3 個模塊
主線程和 IO 線程:負責命令讀取、解析、結果返回。命令執行由主線程完成。
bio 線程:負責執行耗時的異步任務,如 close fd。
后臺進程:fork 子進程來執行耗時的命令。
Redis 支持分別配置上述模塊的 CPU 親和度。你可以在 redis.conf 找到以下配置(該配置需手動開啟)。
# IO 線程(包含主線程)綁定到 CPU 0、2、4、6 server_cpulist 0-7:2 # bio 線程綁定到 CPU 1、3 bio_cpulist 1,3 # aof rewrite 后臺進程綁定到 CPU 8、9、10、11 aof_rewrite_cpulist 8-11 # bgsave 后臺進程綁定到 CPU 1、10、11 bgsave_cpulist 1,10-11
我在上述機器,針對 IO 線程和主線程,進行如下測試:
首先,開啟 IO 線程配置。
io-threads 4 # 主線程 + 3 個 IO 線程io-threads-do-reads yes # IO 線程開啟讀和解析命令功能
測試如下三種場景:
不開啟 CPU 綁定配置。
綁定到不同 node。
「server_cpulist 0,1,2,3」
綁定到相同 node。
「server_cpulist 0,2,4,6」
通過 redis-benchmark 對 get 命令進行基準測試,每種場景執行 3 次。
$ redis-benchmark -n 5000000 -c 50 -t get --threads 4
結果如下:
1.不開啟 CPU 綁定配置
throughput summary: 248818.11 requests per second throughput summary: 248694.36 requests per second throughput summary: 249004.00 requests per second
2.綁定不同 node
throughput summary: 248880.03 requests per second throughput summary: 248447.20 requests per second throughput summary: 248818.11 requests per second
3.綁定相同 node
throughput summary: 284414.09 requests per second throughput summary: 284333.25 requests per second throughput summary: 265252.00 requests per second
根據測試結果,綁定到同一個 node,qps 大約提升 15%
使用綁定 CPU,你需要注意以下幾點:
Linux 下,你可以使用 「numactl --hardware」 查看硬件布局,確保支持并開啟 NUMA。
線程要盡可能分布在 「不同的 CPU,相同的 node」,設置 CPU 親和度才有效。否則會造成頻繁上下文切換和遠距離內存訪問。
你要熟悉 CPU 架構,做好充分的測試。否則可能適得其反,導致 Redis 性能下降。
感謝你能夠認真閱讀完這篇文章,希望小編分享的“Redis如何綁定CPU”這篇文章對大家有幫助,同時也希望大家多多支持億速云,關注億速云行業資訊頻道,更多相關知識等著你來學習!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。