淺談Redis的keys命令到底有多慢
keys命令的用法:
keys pattern
查找符合正則匹配的key的列表。掃描對(duì)象是Redis服務(wù)中所有的key,想想都很慢對(duì)不對(duì)?
同時(shí)執(zhí)行keys命令的同時(shí),Redis進(jìn)程將被阻塞,無(wú)法執(zhí)行其他命令,假如超過(guò)了哨兵的down-after-milliseconds
配置,還會(huì)進(jìn)行主從切換,切換過(guò)程中,如果主節(jié)點(diǎn)恢復(fù)正常,還可能出現(xiàn)腦裂等一系列問(wèn)題。
所以,生產(chǎn)環(huán)境中,建議直接禁用keys命令。
Keys命令的替代方案
1、scan掃描,避免阻塞
2、將需要統(tǒng)計(jì)的數(shù)據(jù)放入一個(gè)set中 (但是這樣可能出現(xiàn)Big Key問(wèn)題,一般數(shù)據(jù)量大就不推薦)
Keys命令在Redis Cluster中是怎樣執(zhí)行的?
一般來(lái)說(shuō),keys命令對(duì)于集群節(jié)點(diǎn)來(lái)說(shuō),是不知道路由到哪個(gè)節(jié)點(diǎn)的,不像 get命令。在Java的Jedis客戶端的JedisClusterKeyCommands
類中,我們看到:
public Set<byte[]> keys(byte[] pattern) { // 在每個(gè)節(jié)點(diǎn)執(zhí)行keys命令 Collection<Set<byte[]>> keysPerNode = connection.getClusterCommandExecutor() .executeCommandOnAllNodes((JedisClusterCommandCallback<Set<byte[]>>) client -> client.keys(pattern)) .resultsAsList(); // 合并成一個(gè)整體后返回 Set<byte[]> keys = new HashSet<>(); for (Set<byte[]> keySet : keysPerNode) { keys.addAll(keySet); } return keys; }
我們看到,Jedis是通過(guò)在每個(gè)節(jié)點(diǎn)上執(zhí)行keys命令,并將結(jié)果合并返回的。
本文既然將keys命令的慢,那么他到底有多慢呢?
Keys命令到底有多慢?
這里主要是給大家一個(gè)基本的概念,并不是深入剖析。
這是騰訊云上Redis集群服務(wù)中,慢查詢的日志。我們看到,Keys命令大概執(zhí)行了250ms ~ 300ms。
根據(jù)節(jié)點(diǎn)信息,我們看到,每個(gè)節(jié)點(diǎn)存儲(chǔ)了大約153w的key
,占用內(nèi)存300M+
,平均每個(gè)鍵值對(duì)占用內(nèi)存0.208KB
,合213個(gè)字節(jié)
。
根據(jù)我的理解,既然keys命令返回的是key值,而集群中其實(shí)有一個(gè)結(jié)構(gòu)slots_to_keys
記錄著所有key 的, 這只與key的數(shù)量有關(guān),與Big key的關(guān)系不大。
按照這種猜想,假如此時(shí)Redis節(jié)點(diǎn)占用內(nèi)存為3G,且Key數(shù)量成比例,那么Keys命令執(zhí)行時(shí)間因?yàn)?s左右,這段時(shí)間Redis節(jié)點(diǎn)是阻塞的。
到此這篇關(guān)于淺談Redis的keys命令到底有多慢的文章就介紹到這了,更多相關(guān)Redis keys命令內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
壓縮列表犧牲速度來(lái)節(jié)省內(nèi)存,Redis是膨脹了嗎
這篇文章主要給大家解釋了Redis 當(dāng)中的 ziplist(壓縮列表)犧牲速度來(lái)節(jié)省內(nèi)存的原因,希望大家能夠喜歡2021-02-02Redis鍵值設(shè)計(jì)的具體實(shí)現(xiàn)
本文主要介紹了Redis鍵值設(shè)計(jì)的具體實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2024-06-06redis?key鍵過(guò)期刪除策略及淘汰機(jī)制探究
這篇文章主要為大家介紹了redis?key鍵過(guò)期刪除策略及淘汰機(jī)制探究,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-11-11Redis fork進(jìn)程分配不到內(nèi)存解決方案
這篇文章主要介紹了Redis fork進(jìn)程分配不到內(nèi)存解決方案,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-11-11詳解redis分布式鎖(優(yōu)化redis分布式鎖的過(guò)程及Redisson使用)
在分布式的開(kāi)發(fā)中,以電商庫(kù)存的更新功能進(jìn)行講解,在實(shí)際的應(yīng)用中相同功能的消費(fèi)者是有多個(gè)的,這篇文章主要介紹了redis分布式鎖詳解(優(yōu)化redis分布式鎖的過(guò)程及Redisson使用),需要的朋友可以參考下2021-11-11Redis如何使用HyperLogLog的實(shí)現(xiàn)
本文主要介紹了Redis如何使用HyperLogLog的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2022-06-06Redis數(shù)據(jù)類型之散列類型hash命令學(xué)習(xí)
這篇文章主要為大家介紹了Redis數(shù)據(jù)類型之散列類型hash命令學(xué)習(xí),有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-07-07