溫馨提示×

溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Redis Set海量數(shù)據(jù)如何優(yōu)化

發(fā)布時間：2021-12-18 17:26:09 來源：億速云 閱讀：586 作者：iii 欄目：大數(shù)據(jù)

本篇內(nèi)容介紹了“Redis Set海量數(shù)據(jù)如何優(yōu)化”的有關(guān)知識，在實際案例的操作過程中，不少人都會遇到這樣的困境，接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧！希望大家仔細閱讀，能夠?qū)W有所成！

項目數(shù)據(jù)業(yè)務(wù)架構(gòu)圖

Redis Set海量數(shù)據(jù)如何優(yōu)化

 

為了實現(xiàn)去重的功能【統(tǒng)計網(wǎng)格時間內(nèi)船舶數(shù)】,采用redis Set 結(jié)構(gòu)。數(shù)據(jù)有效期2天。由于數(shù)據(jù)量的龐大,導(dǎo)致在測試環(huán)境下redis down 掉。

首先采用flushdb 清空數(shù)據(jù)

存儲代碼如下：將船舶MMSI 轉(zhuǎn)成String-> byte[]

這樣每一個MMSI 【9位】 就會占去 9個字節(jié)內(nèi)存大小。

Redis Set海量數(shù)據(jù)如何優(yōu)化

優(yōu)化數(shù)據(jù)結(jié)構(gòu)：

采用Integer轉(zhuǎn)byte[] 只需4個字節(jié)大小

Redis Set海量數(shù)據(jù)如何優(yōu)化

那么現(xiàn)在對于2億個redisKey ,至少會節(jié)約內(nèi)存大小為：

2億*(9-4)=10億字節(jié)

Redis Set海量數(shù)據(jù)如何優(yōu)化

至少會節(jié)省近1G內(nèi)存。如果平均一個KEY 里面存儲10個MMSI 那么就是節(jié)省近10個G內(nèi)存。

“Redis Set海量數(shù)據(jù)如何優(yōu)化”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注億速云網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實用文章！

向AI問一下細節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點不代表本網(wǎng)站立場，如果涉及侵權(quán)請聯(lián)系站長郵箱：is@yisu.com進行舉報，并提供相關(guān)證據(jù)，一經(jīng)查實，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手