redis模糊批量刪除key的方法
一、命令行刪除
redis-cli -h 172.18.255.99 -p 6379 -n 6 -a 123456 KEYS "websocket127.0.0.1:5*" | xargs redis-cli -h 172.18.255.99 -p 6379 -n 6 -a 123456 DEL
- -h:redis地址
- -p:redis端口
- -n:reids庫
- -a:redis密碼
Redis 提供了一個(gè)簡單暴力的指令 keys 用來列出所有滿足特定正則字符串規(guī)則的 key。
注:這個(gè)指令使用非常簡單,提供一個(gè)簡單的正則字符串即可,但是有很明顯的兩個(gè)缺點(diǎn)。
- 沒有 offset、limit 參數(shù),一次性吐出所有滿足條件的 key,萬一實(shí)例中有幾百 w 個(gè) key 滿足條件,
- 當(dāng)你看到滿屏的字符串刷的沒有盡頭時(shí),你就知道難受了。
- keys 算法是遍歷算法,復(fù)雜度是 O(n),如果實(shí)例中有千萬級(jí)以上的 key,這個(gè)指令就會(huì)導(dǎo)致 Redis 服務(wù)卡頓,
- 所有讀寫 Redis 的其它的指令都會(huì)被延后甚至?xí)瑫r(shí)報(bào)錯(cuò),
- 因?yàn)?Redis 是單線程程序,順序執(zhí)行所有指令,其它指令必須等到當(dāng)前的 keys 指令執(zhí)行完了才可以繼續(xù)。
所以建議生產(chǎn)環(huán)境屏蔽keys命令
scan 相比 keys 具備有以下特點(diǎn):
- 復(fù)雜度雖然也是 O(n),但是它是通過游標(biāo)分步進(jìn)行的,不會(huì)阻塞線程;
- 提供 limit 參數(shù),可以控制每次返回結(jié)果的最大條數(shù),limit 只是對(duì)增量式迭代命令的一種提示(hint),返回的結(jié)果可多可少;
- 同 keys 一樣,它也提供模式匹配功能;
- 服務(wù)器不需要為游標(biāo)保存狀態(tài),游標(biāo)的唯一狀態(tài)就是 scan 返回給客戶端的游標(biāo)整數(shù);
- 返回的結(jié)果可能會(huì)有重復(fù),需要客戶端去重復(fù),這點(diǎn)非常重要;
- 遍歷的過程中如果有數(shù)據(jù)修改,改動(dòng)后的數(shù)據(jù)能不能遍歷到是不確定的;
- 單次返回的結(jié)果是空的并不意味著遍歷結(jié)束,而要看返回的游標(biāo)值是否為零
KEYS vs SCAN
一樣都會(huì)掃過所有的 key,scan 不會(huì)阻塞整個(gè) server,而是迭代的收集結(jié)果
DEL vs UNLINK
一樣都是刪除 key ,差別在於 unlink 是非阻塞的刪除,會(huì)以非同步的方式回收記憶體
所以對(duì)于一個(gè)大的key數(shù)量,我們可以借助sscan使用下邊的命令可以實(shí)現(xiàn)優(yōu)雅的批量刪除:
redis-cli -h 172.18.255.99 -p 6379 --scan --pattern users:* | xargs redis-cli -h 172.18.255.99 -p 6379 unlink
- 用 scan 找出要?jiǎng)h的 key
- 透過 xargs 傳給 unlink 刪掉 key
(error) ERR unknown command 'unlink'
如果出現(xiàn)以上錯(cuò)誤,說明redis版本不足,使用unlink需要Redis4版本
cluster 刪除數(shù)據(jù)
redis-cli -c -p 7000 --scan --pattern "age_*" | xargs -L 1 redis-cli -c -p 7000 -n 0 unlink
遍歷redis cluster各分片刪除
for port in {7000..7005}; do redis-cli -c -p ${port} -h 192.168.31.181 --scan --pattern "age_*" | xargs -L 1 redis-cli -h 192.168.31.181 -c -p ${port} -n 0 unlink done
二、golang代碼刪除
func DeleteRedisKeys(key string) { traceId := libra.GenTraceId(context.Background(), nil) ctx := libra.SetTraceId(context.Background(), traceId) //模糊查詢所有符合條件的key websocketKeys, _ := commons.GetRedisClient().Keys(ctx, key+"*").Result() if reflect.TypeOf(websocketKeys).Kind() == reflect.Slice { val := reflect.ValueOf(websocketKeys) if val.Len() == 0 { return } // 批量刪除key for i := 0; i < val.Len(); i++ { _, err := commons.GetRedisClient().Del(ctx, val.Index(i).Interface().(string)).Result() dlog.Errorf("DeleteKeys addr:=%v,err=%v", addr, err) } } }
參考文檔:
Redis SCAN的使用:http://jinguoxing.github.io/redis/2018/09/04/redis-scan/
到此這篇關(guān)于redis模糊批量清除key的文章就介紹到這了,更多相關(guān)redis模糊刪除key內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
關(guān)于Redis數(shù)據(jù)持久化的概念介紹
Redis是內(nèi)存數(shù)據(jù)庫,數(shù)據(jù)都是存儲(chǔ)在內(nèi)存中,需要定期將Redis中的數(shù)據(jù)以某種形式(或命數(shù)據(jù)令)從內(nèi)存保存到硬盤,今天給大家分享Redis數(shù)據(jù)的持久化的概念介紹,需要的朋友參考下吧2021-08-08關(guān)于Redis數(shù)據(jù)庫入門詳細(xì)介紹
大家好,本篇文章主要講的是關(guān)于Redis數(shù)據(jù)庫入門詳細(xì)介紹,感興趣的同學(xué)趕快來看一看吧,對(duì)你有幫助的話記得收藏一下,方便下次瀏覽2021-12-12redis和redisson實(shí)現(xiàn)分布式鎖的操作方法
使用 Redis 實(shí)現(xiàn)分布式鎖,最直接的想法是利用 setnx 和 expire 命令實(shí)現(xiàn)加鎖,這篇文章主要介紹了redis和redisson實(shí)現(xiàn)分布式鎖的操作方法,需要的朋友可以參考下2024-03-03