前言

今天分享一次Redis引發(fā)的線(xiàn)上事故，避免再次踩雷，實(shí)現(xiàn)快速入門(mén)，豐富個(gè)人簡(jiǎn)歷，提高面試level，給自己增加一點(diǎn)談資，秒變面試小達(dá)人，BAT不是夢(mèng)。

一、 順豐高級(jí)開(kāi)發(fā)工程師在線(xiàn)執(zhí)行了 Redis 危險(xiǎn)命令導(dǎo)致某公司損失 400 萬(wàn)

一個(gè)命令損失數(shù)百萬(wàn)，這，需要賠償嗎？

代碼不規(guī)范，同事兩行淚，擼碼需謹(jǐn)慎！

處于好奇考慮，我來(lái)測(cè)試一下，這到底是什么問(wèn)題？

二、測(cè)試一下1000萬(wàn)數(shù)據(jù)的性能

1、編寫(xiě)腳本文件

寫(xiě)入1000萬(wàn)數(shù)據(jù)。

for((i=1;i<=10000000;i++)); do echo "set k$i 哪吒編程$i" >> /tmp/test1.txt;done;

通過(guò)/tmp/test1.txt查看一下是否寫(xiě)入成功。

2、寫(xiě)入Redis1000萬(wàn)數(shù)據(jù)

cat /tmp/test1.txt | redis-cli -a 111111 --pipe

3、通過(guò)keys * 查看1000萬(wàn)數(shù)據(jù)

4、通過(guò)配置文件禁止keys *的使用

在redis.conf文件中配置security：

  rename- command keys ""
  rename- command flushdb ""
  rename- command flushall ""

三、使用scan替代keys *

Redis Scan 命令用于迭代數(shù)據(jù)庫(kù)中的數(shù)據(jù)庫(kù)鍵。

SCAN 命令是一個(gè)基于游標(biāo)的迭代器，每次被調(diào)用之后， 都會(huì)向用戶(hù)返回一個(gè)新的游標(biāo)， 用戶(hù)在下次迭代時(shí)需要使用這個(gè)新游標(biāo)作為 SCAN 命令的游標(biāo)參數(shù)， 以此來(lái)延續(xù)之前的迭代過(guò)程。

SCAN 返回一個(gè)包含兩個(gè)元素的數(shù)組， 第一個(gè)元素是用于進(jìn)行下一次迭代的新游標(biāo)， 而第二個(gè)元素則是一個(gè)數(shù)組， 這個(gè)數(shù)組中包含了所有被迭代的元素。如果新游標(biāo)返回 0 表示迭代已結(jié)束。

scan語(yǔ)法：

SCAN cursor [MATCH pattern] [COUNT count]

四、拒絕bigkey

1、阿里云Redis開(kāi)發(fā)規(guī)范

阿里云Redis開(kāi)發(fā)規(guī)范中明確規(guī)定“拒絕bigkey（防止網(wǎng)卡流量、慢查詢(xún)）”。

String類(lèi)型控制在10KB以?xún)?nèi)，hash、list、set、zset元素個(gè)數(shù)不要超過(guò)5000。

2、出現(xiàn)bigkey時(shí)如何刪除？

1. String類(lèi)型的用del刪除。
2. 其它類(lèi)型使用hscan、sscan、zscan方式漸進(jìn)式刪除，同時(shí)要避免bigkey過(guò)期時(shí)間自動(dòng)刪除問(wèn)題，因?yàn)樗鼤?huì)造成主線(xiàn)程阻塞。

Hash 刪除: hscan+hdel

public void delBigHash(String host, int port, String password, String bigHashKey) {
    Jedis jedis = new Jedis(host, port);
    if (password != null && !"".equals(password)) {
        jedis.auth(password);
    }
    ScanParams scanParams = new ScanParams().count(100);
    String cursor = "0";
    do {
        ScanResult<Entry<String, String>> scanResult = jedis.hscan(bigHashKey, cursor, scanParams);
        List<Entry<String, String>> entryList = scanResult.getResult();
        if (entryList != null && !entryList.isEmpty()) {
            for (Entry<String, String> entry : entryList) {
                jedis.hdel(bigHashKey, entry.getKey());
            }
        }
        cursor = scanResult.getStringCursor();
    } while (!"0".equals(cursor));
    
    //刪除 bigkey
    jedis.del(bigHashKey);
}

3、bigkey會(huì)造成哪些問(wèn)題？

1. 內(nèi)存不均，集群遷移困難；
2. 超時(shí)刪除，阻塞線(xiàn)程；
3. 網(wǎng)絡(luò)流量阻塞；

4、如何發(fā)現(xiàn)bigkey？

（1）通過(guò)redis-cli --bigkeys查找。

（2）計(jì)算每個(gè)鍵值的字節(jié)數(shù)，通過(guò)memory usage key查找

到此這篇關(guān)于關(guān)于Redis bigkeys命令會(huì)阻塞問(wèn)題的解決的文章就介紹到這了,更多相關(guān)Redis bigkeys命令阻塞內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

最新評(píng)論