溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

在Redis中如何對集群進(jìn)行擴(kuò)容

發(fā)布時間:2021-11-16 13:35:40 來源:億速云 閱讀:945 作者:小新 欄目:大數(shù)據(jù)

小編給大家分享一下在Redis中如何對集群進(jìn)行擴(kuò)容,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

在使用Redis搭建集群環(huán)境時,通常會根據(jù)業(yè)務(wù)的需求,要對集群進(jìn)行擴(kuò)容,以滿足業(yè)務(wù)的需要。并且這也是分布式存儲比較常見的需求,在Redis中對集群進(jìn)行擴(kuò)容主要分為3步:

1.準(zhǔn)備新節(jié)點

2.加入集群

3.遷移槽和數(shù)據(jù)

下面我們詳細(xì)介紹一下這3個步驟:

  • 準(zhǔn)備新節(jié)點

我們還是向準(zhǔn)備其它節(jié)點一樣,先修改節(jié)點配置。

# 節(jié)點端口
port 6385
# 開啟集群模式
cluster-enabled yes
# 節(jié)點超時時間,單位為毫秒
cluster-node-timeout 15000
# 集群內(nèi)部配置文件
cluster-config-file "nodes-6385.conf"


啟動該節(jié)點:

./src/redis-server redis-6385.conf
./src/redis-server redis-6386.conf


但此時新增的節(jié)點還沒有和其它節(jié)點進(jìn)行通信,所以該節(jié)點現(xiàn)在還沒有添加到集群環(huán)境中。


  • 加入集群

將新節(jié)點加入集群我們可以通過cluster meet命令。

cluster meet 127.0.0.1 6385
cluster meet 127.0.0.1 6386
在Redis中如何對集群進(jìn)行擴(kuò)容

我們看上圖所示,新節(jié)點雖然添加到了集群環(huán)境中,但新節(jié)點的類型是master的,也就是都是主節(jié)點。同樣我們也可以使用redis-trib.rb工具添加新節(jié)點,并且該命令可以直接支持添加從節(jié)點。

redis-trib.rb add-node 127.0.0.1:6385 127.0.0.1:6379
redis-trib.rb add-node 127.0.0.1:6386 127.0.0.1:6379
在Redis中如何對集群進(jìn)行擴(kuò)容

在生產(chǎn)環(huán)境中我們推薦使用redis-trib.rb命令添加新節(jié)點,因為該命令在添加新節(jié)點時會執(zhí)行檢查,如果新節(jié)點已經(jīng)加入集群或者包含數(shù)據(jù),則該命令會放棄集群加入。


  • 遷移槽和數(shù)據(jù)

加入集群后需要為新節(jié)點遷移槽和相關(guān)的數(shù)據(jù),槽在遷移的過程中集群可以正常的提供讀寫服務(wù)。下面我們詳細(xì)介紹一下這方面的內(nèi)容。

1.槽遷移計劃

槽是Redis集群管理數(shù)據(jù)的基本單位,首先需要為新節(jié)點指定槽的遷移計劃,也就是將哪些節(jié)點的哪些槽遷移到新節(jié)點中。并且遷移計劃要確保每個節(jié)點負(fù)責(zé)相似數(shù)量的槽,從而保證各節(jié)點的數(shù)據(jù)均勻。槽遷移計劃確定后開始逐個把槽內(nèi)數(shù)據(jù)從源節(jié)點遷移到目標(biāo)節(jié)點中。


2.遷移數(shù)據(jù)

數(shù)據(jù)遷移過程是逐個槽進(jìn)行的,每個槽遷移的流程如下.

流程說明:

1)對目標(biāo)節(jié)點發(fā)送cluster setslot {slot} importing {sourceNodeId}命令,讓目標(biāo)節(jié)點準(zhǔn)備導(dǎo)入槽數(shù)據(jù)。
2)對源節(jié)點發(fā)送cluster setslot {slot} migrating {targetNodeId}命令,讓源節(jié)點準(zhǔn)備遷出槽數(shù)據(jù)。
3)源節(jié)點循環(huán)執(zhí)行cluster getkeysinslot {slot} {count}命令,獲取count個數(shù)據(jù)槽{slot}的鍵。
4)在源節(jié)點上執(zhí)行migrate {targetIp} {targetPort} "" 0 {timeout} {keys} {keys …}命令。把獲取的鍵通過流水線(pipeline)機(jī)制批量遷移到目標(biāo)節(jié)點。
5)重復(fù)步驟3、4部直到槽下所有的鍵值數(shù)據(jù)遷移到目標(biāo)節(jié)點。
6)向集群內(nèi)所有主節(jié)點發(fā)送cluster setslot {slot} node {targetNodeId}命令,通知槽分配給目標(biāo)節(jié)點。

在Redis中如何對集群進(jìn)行擴(kuò)容

下面我們手動使用上述命令把節(jié)點6379負(fù)責(zé)的槽4096遷移到目標(biāo)節(jié)點6385中,具體操作如下:

1.目標(biāo)節(jié)點準(zhǔn)備導(dǎo)入槽4096數(shù)據(jù)。

cluster setslot 4096 importing 目標(biāo)節(jié)點ID
在Redis中如何對集群進(jìn)行擴(kuò)容

2.源節(jié)點注備導(dǎo)出槽4096數(shù)據(jù)。

cluster setslot 4096 migrating 源節(jié)點ID
在Redis中如何對集群進(jìn)行擴(kuò)容

3.批量獲取槽4096對應(yīng)的鍵。

cluster getkeysinslot 4096 100
在Redis中如何對集群進(jìn)行擴(kuò)容

我們先查詢一下在6379節(jié)點是否包括上述的key。

在Redis中如何對集群進(jìn)行擴(kuò)容

下面我們遷移這3個鍵。

在Redis中如何對集群進(jìn)行擴(kuò)容

下面我們繼續(xù)在6379節(jié)點中查詢上述的3個鍵。

在Redis中如何對集群進(jìn)行擴(kuò)容

下面我們通知所有主節(jié)點槽4096指派給目標(biāo)節(jié)點6385。

在Redis中如何對集群進(jìn)行擴(kuò)容

我們可以在6379節(jié)點中查看一下確定4096槽不在由6379負(fù)責(zé)。

在Redis中如何對集群進(jìn)行擴(kuò)容

上述內(nèi)容就是手動執(zhí)行槽遷移的過程。在實際的操作中因為會涉及到大量槽及鍵的遷移,所以會很不方便,因此redis-trib工具提供了槽分片功能,命令如下:

redis-trib.rb reshard host:port --form <arg> --to <arg> --slots <arg> --yes --timeout <arg> ---pepeline <arg>


下面我們介紹一下上述命令參數(shù)說明:

  • host:port:比傳參數(shù),集群內(nèi)任意節(jié)點地址,用來獲取整個集群信息。

  • --form:制定源節(jié)點的id,如果有多個源節(jié)點,則使用逗號分割。

  • --to:需要遷移的目標(biāo)節(jié)點id,并且目標(biāo)節(jié)點只能指定一個。

  • --slots:需要遷移槽的總數(shù)量。

  • --yes:當(dāng)打印出reshard執(zhí)行計劃時,是否需要用戶輸入yes確認(rèn)后再執(zhí)行reshard。

  • --timeout:控制每次migrate操作的超時時間,默認(rèn)為60000毫秒。

  • --pipeline:控制每次批量遷移鍵的數(shù)量,默認(rèn)為10。


下面我們使用reshard命令遷移剩余槽的數(shù)據(jù)。

在Redis中如何對集群進(jìn)行擴(kuò)容

上述命令執(zhí)行完后reshard命令會提示我們輸入遷移槽的數(shù)量,我們暫時輸入4096。

在Redis中如何對集群進(jìn)行擴(kuò)容

當(dāng)我們輸入完遷移槽的數(shù)量后,會提示我們輸入目標(biāo)節(jié)點ID,我們輸入6385節(jié)點ID。

在Redis中如何對集群進(jìn)行擴(kuò)容

同樣,我們輸入完目標(biāo)節(jié)點后,會提示我們輸入輸入源節(jié)點ID,也就是主節(jié)點ID,所以我們輸入6379、6380、6381三個主節(jié)點ID,并且已done命令結(jié)束。

在Redis中如何對集群進(jìn)行擴(kuò)容

當(dāng)輸入完上述命令后,會打印出所有槽從源節(jié)點到目標(biāo)節(jié)點的計劃,并讓我們輸入yes命令后才會繼續(xù)執(zhí)行遷移工作。

在Redis中如何對集群進(jìn)行擴(kuò)容

輸入yes命令后在通過cluster nodes命令查看節(jié)點狀態(tài)。

在Redis中如何對集群進(jìn)行擴(kuò)容

下面我們還有最后一個步驟,就是當(dāng)初我們雖然把6385和6386節(jié)點添加到了集群,并且已經(jīng)將部分槽和數(shù)據(jù)遷移到了6385節(jié)點上,但該節(jié)點并沒有相應(yīng)的從節(jié)點,所以下面的步驟就是將6386節(jié)點設(shè)置為6385節(jié)點的從節(jié)點。

在Redis中如何對集群進(jìn)行擴(kuò)容

以上是“在Redis中如何對集群進(jìn)行擴(kuò)容”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI