溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Redis中Cluster字段模糊匹配及刪除的示例分析

發(fā)布時間:2021-05-27 11:13:34 來源:億速云 閱讀:516 作者:小新 欄目:開發(fā)技術(shù)

小編給大家分享一下Redis中Cluster字段模糊匹配及刪除的示例分析,希望大家閱讀完這篇文章之后都有所收獲,下面讓我們一起去探討吧!

Questions

在數(shù)據(jù)庫內(nèi)我們可以通過like關(guān)鍵字、%、*或者REGEX關(guān)鍵字進行模糊匹配。而在Redis內(nèi)我們?nèi)绾芜M行模糊匹配呢?集群情況Redis Cluster的情況是否和單機一致呢?前段時間我對于這個議題進行了調(diào)查和研究。

單節(jié)點的情況

Jedis
參考stackoverflow上的解答,在Java內(nèi)使用Jedis主要有如下2中寫法:

### 方法1
Set<String> keys = jedis.keys(pattern);
for (String key : keys) {
    jedis.del(key);
} 

### 方法2
Jedis jedis = new Jedis("127.0.0.1");
ScanParams scanParams = new ScanParams();
scanParams.match("prifix*");
scanParams.count(1000);
ScanResult<String> result = jedis.scan(0,scanParams);
result.getResult().forEach(key -> {
    jedis.del(key);
});

### 注意scan方法由于某些bug在2.9版本內(nèi)scan(int,ScanParams)改為了scan(String,ScanParams)。由于cursor的位數(shù),方法有些調(diào)整。

方法1,通過keys命令先尋找到所有符合的key,然后把它們刪除;
方法2,通過scan命令掃描所有符合的key,然后把它們刪除。
注意: Redis飾單線程模式,全局掃描的話有可能會導(dǎo)致Redis在一段時間內(nèi)的卡頓情況發(fā)生。

Redis-cli

redis-cli keys 1.cn*|xargs redis-cli del

Redis Cluster情況

在Redis Cluster情況與單節(jié)點多情況完全不太一樣。

  • 首先,Redis Cluster是將整個Redis 的hash槽分布在三臺機器上,要想一下全部掃描出來,顯然是不太現(xiàn)實的。

  • Redis內(nèi)提供Hash-Tag,將相類似的鍵放在一臺機器上??梢酝ㄟ^Hash-Tag進行掃描,可以剪短時間消耗。

  • 最后需要考慮,主從集群節(jié)點的情況。

Hash-Tag

Hash-Tag 是用一個花括號將主要的Hash判斷部分擴起來,例如{hello1}key1、{hello1}key2。一般Hash-tag一致的情況,鍵會存儲在集群的同一臺機器上。在Jedis 2.9版本提供了這樣的掃描方法。
(PS . rediscluster是沒有keys方法的)

public static void deleteRedisKeyStartWith(String redisKeyStartWith) {
        try{
            jedisCluster.getClusterNodes();

            ScanParams scanParams = new ScanParams();
//          scanParams.match("{123}keys*");

//          scanParams.count(1000);
            ScanResult<String> result = jedisCluster.scan("0", scanParams);
            result.getResult().forEach(key -> {
                jedisCluster.del(key);
            });
//          jedisCluster.del(wrapperKey(redisKeyStartWith)+".*");
            log.info("success deleted redisKeyStartWith:{}", redisKeyStartWith);
        }finally{
        }
    }

土辦法 分別掃描各個hash槽

public static void deleteRedisKeyStartWith(String redisKeyStartWith) {
        try {
            Map<String, JedisPool> clusterNodes = jedisCluster.getClusterNodes();

            for (Map.Entry<String, JedisPool> entry : clusterNodes.entrySet()) {
                Jedis jedis = entry.getValue().getResource();
                // 判斷非從節(jié)點(因為若主從復(fù)制,從節(jié)點會跟隨主節(jié)點的變化而變化)
                if (!jedis.info("replication").contains("role:slave")) {
                    Set<String> keys = jedis.keys(redisKeyStartWith + "*");
                    if (keys.size() > 0) {
                        Map<Integer, List<String>> map = new HashMap<>();
                        for (String key : keys) {
                            // cluster模式執(zhí)行多key操作的時候,這些key必須在同一個slot上,不然會報:JedisDataException:
                            // CROSSSLOT Keys in request don't hash to the same slot
                            int slot = JedisClusterCRC16.getSlot(key);
                            // 按slot將key分組,相同slot的key一起提交
                            if (map.containsKey(slot)) {
                                map.get(slot).add(key);
                            } else {
                                map.put(slot, Lists.newArrayList(key));
                            }
                        }
                        for (Map.Entry<Integer, List<String>> integerListEntry : map.entrySet()) {
                            jedis.del(integerListEntry.getValue().toArray(new String[integerListEntry.getValue().size()]));
                        }
                    }
                }
            }
            log.info("success deleted redisKeyStartWith:{}", redisKeyStartWith);
        } finally {
        }
    }
### 未使用slot批次提交(有可能效率略差于前者)
//獲取jedis連接

         private JedisCluster jedisCluster=JedisClusterUtil.getJedisCluster();

         //@param pattern  獲取key的前綴  全是是 * 

 public static TreeSet<String> keys(String pattern){  


       TreeSet<String> keys = new TreeSet<>();  
        //獲取所有的節(jié)點

               Map<String, JedisPool> clusterNodes = jedisCluster.getClusterNodes();  
       //遍歷節(jié)點 獲取所有符合條件的KEY 

               for(String k : clusterNodes.keySet()){  
           logger.debug("Getting keys from: {}", k);  
           JedisPool jp = clusterNodes.get(k);  
           Jedis connection = jp.getResource();  
           try {  
               keys.addAll(connection.keys(pattern));  
           } catch(Exception e){  
               logger.error("Getting keys error: {}", e);  
           } finally{  
               logger.debug("Connection closed.");  
               connection.close();//用完一定要close這個鏈接?。?!  
           }  
       }  
       logger.debug("Keys gotten!");  
       return keys;  
  }  

          //main方法

 public static void main(String[] args ){
 TreeSet<String> keys=keys("*");

 //遍歷key  進行刪除  可以用多線程

 for(String key:keys){

                          jedisCluster.del(key);
 System.out.println(key);
 }
 }

Reference

[1]. (碼經(jīng))如何通過正則匹配刪除Redis里的鍵
[2]. (Stackoverflow)Redis/Jedis - Delete by pattern?
[3]. (JavaDoc)Class JedisCluster
[4]. (csdn)redis cluster 模式如何批量刪除指定前綴的key
[5]. redis cluster模式key的模糊刪除-java操作
[6]. Jedis實現(xiàn)批量刪除redis cluster
[6]. redis del命令支持正則刪除(pattern)
[7]. Redis 批量刪除Redis的key 正則匹配刪除
[8]. (名字挺搞笑-蛋糕店老板)Redis集群下使用Jedis實現(xiàn)keys模糊查詢

看完了這篇文章,相信你對“Redis中Cluster字段模糊匹配及刪除的示例分析”有了一定的了解,如果想了解更多相關(guān)知識,歡迎關(guān)注億速云行業(yè)資訊頻道,感謝各位的閱讀!

向AI問一下細節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI