溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Redis數(shù)據(jù)刪除方式有哪些

發(fā)布時間:2021-11-10 10:30:34 來源:億速云 閱讀:143 作者:小新 欄目:數(shù)據(jù)庫

小編給大家分享一下Redis數(shù)據(jù)刪除方式有哪些,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

同步和異步刪除

1.DEL 和 UNLINK

Redis服務(wù)自身對Key的刪除,可以分為「同步刪除」和「異步刪除」。使用DEL命令會觸發(fā)「同步刪除」,如果Key是一個有很多元素的復(fù)雜類型,這個過程可能會堵塞一下Redis服務(wù)自身,從而影響用戶的訪問。如果使用UNLINK命令,Redis服務(wù)會先計算刪除Key的成本,從而更智能地做出「同步刪除」或「異步刪除」的選擇。注意,只有4.0版本后,才有UNLINK命令。

2.成本計算

那么,成本是如何計算的呢?對于list,hash,set,zset的對象類型,如果長度大于64(由宏LAZYFREE_THRESHOLD定義),才會采用異步刪除的手段,從當(dāng)前db先釋放該key,再由另外一個線程做異步刪除。對于長度不大于64的復(fù)雜類型,異步刪除比同步刪除還多了一些函數(shù)調(diào)用與多線程同步的代價,所以同步刪除更好。對于string對象,底層的數(shù)據(jù)結(jié)構(gòu)sds是一份連續(xù)的內(nèi)存,內(nèi)存分配器回收這塊內(nèi)存的復(fù)雜度是O(1),所以采用同步刪除也不會堵塞服務(wù)。

總的來說,我們作為用戶,都能用UNLINK替代DEL。

Key的驅(qū)逐

1.定義

Redis處理命令前根據(jù)內(nèi)存容量是否觸達(dá)上限而進(jìn)行的Key驅(qū)逐。

2.驅(qū)逐策略

Redis通過參數(shù)maxmemory來選擇不同的驅(qū)逐策略:

  • volatile-random 從已設(shè)置過期時間的數(shù)據(jù)集(server.db[i].expires)中任意選擇數(shù)據(jù)驅(qū)逐;volatile-lru 從數(shù)據(jù)集(server.db[i].dict)中挑選最近最少使用的數(shù)據(jù)驅(qū)逐(2.8默認(rèn));

  • volatile-ttl 從已設(shè)置過期時間的數(shù)據(jù)集(server.db[i].expires)中尋找最近即將過期(ttl最小)的key來驅(qū)逐;

  • allkeys-random 從數(shù)據(jù)集(server.db[i].dict)中任意選擇數(shù)據(jù)驅(qū)逐;

  • allkeys-lru 從數(shù)據(jù)集(server.db[i].dict)中挑選最近最少使用的數(shù)據(jù)驅(qū)逐;

  • noeviction 禁止驅(qū)逐數(shù)據(jù),永遠(yuǎn)不驅(qū)逐,僅對寫操作返回一個錯誤(4.0默認(rèn));

在4.0版本后,還增加了以下兩種驅(qū)逐策略。

  • volatile-lfu在過期集合中使用LFU鏈來驅(qū)逐數(shù)據(jù);

  • allkeys-lfu 從數(shù)據(jù)集(server.db[i].dict)使用LFU算法來驅(qū)逐數(shù)據(jù);

3.簡述

Redis在處理命令前,會看看容量是否觸達(dá)上限。

如果驅(qū)逐策略為noeviction,則不會驅(qū)逐Key,而是返回寫失敗。4.0后,在返回寫入失敗前,還會先檢測lazyfree線程是否還有待刪除的Key,沒有才會給用戶返回寫入失敗。

對于其他策略,都會根據(jù)相應(yīng)定義,進(jìn)行Key的驅(qū)逐,這里不再詳述。

在4.0或以上的版本,Key的驅(qū)逐會基于參數(shù)lazyfree_lazy_eviction,來決定采用unlink還是del。在2.8版本,則只會用del。lazyfree_lazy_eviction參數(shù)在Qcloud 4.0上是no。

這里試問,主從節(jié)點都會進(jìn)行「驅(qū)逐」么?

答案是都會的,各自會因應(yīng)自身的驅(qū)逐策略進(jìn)行驅(qū)逐,并且Master節(jié)點驅(qū)逐的刪除命令還會傳播到Slave節(jié)點。

Key的訪問淘汰

1.定義

訪問一個已過期的Key會觸發(fā)對其的刪除。

2.簡述

與Key的驅(qū)逐一樣,Key的訪問淘汰同樣是基于訪問事件來觸發(fā)的。

主從角色的節(jié)點在處理訪問淘汰上的邏輯是不同的。

對于Slave節(jié)點,訪問到了已過期的Key,Slave節(jié)點會返回該Key不存在,但不會主動刪除該Key。刪除的動作,還是會從Master上同步過來。

對于Master節(jié)點,在4.0或以上的版本,會根據(jù)參數(shù)lazyfree-lazy-expire,來決定用DEL還是UNLINK。對于2.8版本,則只能用DEL了。這些刪除的動作,都會同步到Slave與AOF文件中。

在Qcloud 4.0以上的版本,默認(rèn)是開啟異步刪除的,即lazyfree-lazy-expire=yes

Key的定時淘汰

1.定義

Redis自身的定時調(diào)度把已過期Key刪除。

2.簡述

多久會執(zhí)行一次定時調(diào)度呢?

redis服務(wù)的參數(shù)hz能控制定時淘汰的頻率,hz默認(rèn)是10,即每秒能調(diào)度100次。

剛才說「訪問淘汰」的邏輯只會在Master角色上發(fā)生,那「訪問淘汰」也是嗎?

一般來說,Slave節(jié)點不會進(jìn)行定時淘汰,它只會等待從Master節(jié)點同步過來的刪除命令,這樣就保持了主從之間的一致性。然而,有些時候,用戶會把Slave節(jié)點設(shè)置成可寫,那么Slave上寫的帶有過期時間的Key,因為Master是不知道的,就一直不會淘汰掉。所以在版本4.0以后,Redis增加了單獨的邏輯,在定時淘汰中刪除這些在slave節(jié)點上寫入的過期Key。

對于Master節(jié)點,根據(jù)宏ACTIVE_EXPIRE_CYCLE_SLOW,能選擇兩種淘汰模式,分別是“FAST淘汰”和“SLOW淘汰”,前者每次淘汰只能花1毫秒,不能花更多了,后者是Qcloud默認(rèn)的選項,這樣能在每次調(diào)度中淘汰更多的Key,但會花更多的CPU時間在淘汰上,降低了處理的訪問吞吐量。下面我們針對“SLOW淘汰”展開描述。

SLOW淘汰模式,以hz=10為例,每次調(diào)度的總時間是100ms,這里調(diào)度不會25%的cpu時間,即25ms。

每淘汰多少個key,就檢測一次是否超25ms呢?

如果每淘汰1個Key就檢測一次,無疑代價太大。從源碼上看,定時淘汰會嘗試遍歷每個db,遍歷完了或者時間到了就退出循環(huán)。第一層循環(huán)是遍歷各個db,第二層循環(huán)是遍歷db里面的一批批key,一批key是20個,如果第三層循環(huán)結(jié)束后有大于5個key是成功淘汰的(說明這個db很多淘汰key),那么二層就繼續(xù)循環(huán),如果小于等于5個key,說明這個db沒有很多key需要淘汰,則退出二層循環(huán),第三層循環(huán)是一批key里面逐個key進(jìn)行淘汰。即最多320個key進(jìn)行判斷后,就會看看是否已經(jīng)超過cpu占用時間。

在4.0或以上的版本,會根據(jù)參數(shù)lazyfree-lazy-expire(默認(rèn)no)來做DEL還是UNLINK。在Qcloud的4.0以上版本,這里會特意配置成yes,以便盡量采用UNLINK操作。2.8版本不支持lazyfree-lazy-expire,就只能選擇DEL命令。

這里的定時淘汰,也會以命令的形式,傳播到Slave節(jié)點與記錄到AOF文件中。

以上是“Redis數(shù)據(jù)刪除方式有哪些”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI