溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

SpringBoot中怎么通過整合Redis實(shí)現(xiàn)管道

發(fā)布時間:2021-07-06 17:53:25 來源:億速云 閱讀:117 作者:Leah 欄目:開發(fā)技術(shù)

這篇文章給大家介紹SpringBoot中怎么通過整合Redis實(shí)現(xiàn)管道,內(nèi)容非常詳細(xì),感興趣的小伙伴們可以參考借鑒,希望對大家能有所幫助。


1. Redis 之管道(pipeline)

執(zhí)行一個Redis命令,Redis客戶端和Redis服務(wù)器就需要執(zhí)行以下步驟:

  • 客戶端發(fā)送命令到服務(wù)器;

  • 服務(wù)器接受命令請求,執(zhí)行命令,產(chǎn)生相應(yīng)的結(jié)果;

  • 服務(wù)器返回結(jié)果給客戶端;

  • 客戶端接受命令的執(zhí)行結(jié)果,并向用戶展示。

Redis命令所消耗的大部分時間都用在了發(fā)送命令請求和接收命令結(jié)果上面,把任意多條Redis命令請求打包在一起,然后一次性地將它們?nèi)堪l(fā)送給服務(wù)器,而服務(wù)器則會把所有命令請求都處理完畢之后,一次性地將它們的執(zhí)行結(jié)果全部返回給客戶端。

注意事項(xiàng):

Redis服務(wù)器并不會限制客戶端在管道中包含的命令數(shù)量,但是卻會為客戶端的輸入緩沖區(qū)設(shè)置默認(rèn)值為1GB的體積上限:當(dāng)客戶端發(fā)送的數(shù)據(jù)量超過這一限制時,Redis服務(wù)器將強(qiáng)制關(guān)閉該客戶端。因此最好不要一下把大量命令或者一些體積非常龐大的命令放到同一個管道中執(zhí)行。

除此之外,很多客戶端本身也帶有隱含的緩沖區(qū)大小限制,如果你在使用流水線特性的過程中,發(fā)現(xiàn)某些流水線命令沒有被執(zhí)行,或者流水線返回的結(jié)果不完整,那么很可能就是你的程序觸碰到了客戶端內(nèi)置的緩沖區(qū)大小限制。

2. SpringBoot 整合 Redis 管道實(shí)例

SpringBoot 整合 redis 的實(shí)例

使用單個的 increment 命令,處理 200w個key:

public class RedisPipelineStudy extends BaseTest {

    @Autowired
    private StringRedisTemplate stringRedisTemplate;

    private static final String PREFIX = "test0:";

    @Test
    public void test() {
        StopWatch stopWatch = new StopWatch();
        stopWatch.start("test0");
        for (int times = 0; times < 2; times++) {
            for (int i = 0; i < 1000000; i++) {
                stringRedisTemplate.opsForValue().increment(PREFIX + i, 1L);
            }
        }
        stopWatch.stop();
        System.out.println(stopWatch.prettyPrint());
    }

}

耗時如下所示:是 12 位 ,單位ns

SpringBoot中怎么通過整合Redis實(shí)現(xiàn)管道

使用管道 incrBy 處理 200w個key,每次打包300條命令發(fā)送給服務(wù)器,如下所示:

public class RedisPipelineStudy extends BaseTest {

    @Autowired
    private StringRedisTemplate stringRedisTemplate;

    private static final String PREFIX = "test1:";

    @Test
    public void test() {
        StopWatch stopWatch = new StopWatch();
        stopWatch.start("test1");
        List<Integer> recordList = new ArrayList<>();
        for (int times = 0; times < 2; times++) {
            for (int i = 0; i < 1000000; i++) {
                try {
                    recordList.add(i);
                    if (recordList.size() > 300) {
                        incrByPipeline(recordList);
                        recordList = new ArrayList<>();
                    }
                } catch (Exception e) {
                    System.out.println(e);
                }
            }
            if (!CollectionUtils.isEmpty(recordList)) {
                incrByPipeline(recordList);
                recordList = new ArrayList<>();
            }
        }
        stopWatch.stop();
        System.out.println(stopWatch.prettyPrint());
    }

    private void incrByPipeline(List<Integer> recordList) {
        stringRedisTemplate.executePipelined(new RedisCallback<Object>() {
            @Override
            public Object doInRedis(RedisConnection connection) throws DataAccessException {
                try {
                    for (Integer record : recordList) {
                        byte[] key = (PREFIX + record).getBytes();
                        connection.incrBy(key, 1);
                    }
                } catch (Exception e) {
                    System.out.println(e);
                }
                return null;
            }
        });
    }
}

耗用時間: 11 位 ,單位 :ns,是單個命令耗時的 1/6。

SpringBoot中怎么通過整合Redis實(shí)現(xiàn)管道

關(guān)于SpringBoot中怎么通過整合Redis實(shí)現(xiàn)管道就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,可以學(xué)到更多知識。如果覺得文章不錯,可以把它分享出去讓更多的人看到。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI