您好,登錄后才能下訂單哦!
小編給大家分享一下在Redis中如何對集群進(jìn)行擴(kuò)容,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!
在使用Redis搭建集群環(huán)境時,通常會根據(jù)業(yè)務(wù)的需求,要對集群進(jìn)行擴(kuò)容,以滿足業(yè)務(wù)的需要。并且這也是分布式存儲比較常見的需求,在Redis中對集群進(jìn)行擴(kuò)容主要分為3步:
1.準(zhǔn)備新節(jié)點
2.加入集群
3.遷移槽和數(shù)據(jù)
下面我們詳細(xì)介紹一下這3個步驟:
準(zhǔn)備新節(jié)點
我們還是向準(zhǔn)備其它節(jié)點一樣,先修改節(jié)點配置。
# 節(jié)點端口
port 6385
# 開啟集群模式
cluster-enabled yes
# 節(jié)點超時時間,單位為毫秒
cluster-node-timeout 15000
# 集群內(nèi)部配置文件
cluster-config-file "nodes-6385.conf"
啟動該節(jié)點:
./src/redis-server redis-6385.conf
./src/redis-server redis-6386.conf
但此時新增的節(jié)點還沒有和其它節(jié)點進(jìn)行通信,所以該節(jié)點現(xiàn)在還沒有添加到集群環(huán)境中。
加入集群
將新節(jié)點加入集群我們可以通過cluster meet命令。
cluster meet 127.0.0.1 6385
cluster meet 127.0.0.1 6386
我們看上圖所示,新節(jié)點雖然添加到了集群環(huán)境中,但新節(jié)點的類型是master的,也就是都是主節(jié)點。同樣我們也可以使用redis-trib.rb工具添加新節(jié)點,并且該命令可以直接支持添加從節(jié)點。
redis-trib.rb add-node 127.0.0.1:6385 127.0.0.1:6379
redis-trib.rb add-node 127.0.0.1:6386 127.0.0.1:6379
在生產(chǎn)環(huán)境中我們推薦使用redis-trib.rb命令添加新節(jié)點,因為該命令在添加新節(jié)點時會執(zhí)行檢查,如果新節(jié)點已經(jīng)加入集群或者包含數(shù)據(jù),則該命令會放棄集群加入。
遷移槽和數(shù)據(jù)
加入集群后需要為新節(jié)點遷移槽和相關(guān)的數(shù)據(jù),槽在遷移的過程中集群可以正常的提供讀寫服務(wù)。下面我們詳細(xì)介紹一下這方面的內(nèi)容。
1.槽遷移計劃
槽是Redis集群管理數(shù)據(jù)的基本單位,首先需要為新節(jié)點指定槽的遷移計劃,也就是將哪些節(jié)點的哪些槽遷移到新節(jié)點中。并且遷移計劃要確保每個節(jié)點負(fù)責(zé)相似數(shù)量的槽,從而保證各節(jié)點的數(shù)據(jù)均勻。槽遷移計劃確定后開始逐個把槽內(nèi)數(shù)據(jù)從源節(jié)點遷移到目標(biāo)節(jié)點中。
2.遷移數(shù)據(jù)
數(shù)據(jù)遷移過程是逐個槽進(jìn)行的,每個槽遷移的流程如下.
流程說明:
1)對目標(biāo)節(jié)點發(fā)送cluster setslot {slot} importing {sourceNodeId}命令,讓目標(biāo)節(jié)點準(zhǔn)備導(dǎo)入槽數(shù)據(jù)。
2)對源節(jié)點發(fā)送cluster setslot {slot} migrating {targetNodeId}命令,讓源節(jié)點準(zhǔn)備遷出槽數(shù)據(jù)。
3)源節(jié)點循環(huán)執(zhí)行cluster getkeysinslot {slot} {count}命令,獲取count個數(shù)據(jù)槽{slot}的鍵。
4)在源節(jié)點上執(zhí)行migrate {targetIp} {targetPort} "" 0 {timeout} {keys} {keys …}命令。把獲取的鍵通過流水線(pipeline)機(jī)制批量遷移到目標(biāo)節(jié)點。
5)重復(fù)步驟3、4部直到槽下所有的鍵值數(shù)據(jù)遷移到目標(biāo)節(jié)點。
6)向集群內(nèi)所有主節(jié)點發(fā)送cluster setslot {slot} node {targetNodeId}命令,通知槽分配給目標(biāo)節(jié)點。
下面我們手動使用上述命令把節(jié)點6379負(fù)責(zé)的槽4096遷移到目標(biāo)節(jié)點6385中,具體操作如下:
1.目標(biāo)節(jié)點準(zhǔn)備導(dǎo)入槽4096數(shù)據(jù)。
cluster setslot 4096 importing 目標(biāo)節(jié)點ID
2.源節(jié)點注備導(dǎo)出槽4096數(shù)據(jù)。
cluster setslot 4096 migrating 源節(jié)點ID
3.批量獲取槽4096對應(yīng)的鍵。
cluster getkeysinslot 4096 100
我們先查詢一下在6379節(jié)點是否包括上述的key。
下面我們遷移這3個鍵。
下面我們繼續(xù)在6379節(jié)點中查詢上述的3個鍵。
下面我們通知所有主節(jié)點槽4096指派給目標(biāo)節(jié)點6385。
我們可以在6379節(jié)點中查看一下確定4096槽不在由6379負(fù)責(zé)。
上述內(nèi)容就是手動執(zhí)行槽遷移的過程。在實際的操作中因為會涉及到大量槽及鍵的遷移,所以會很不方便,因此redis-trib工具提供了槽分片功能,命令如下:
redis-trib.rb reshard host:port --form <arg> --to <arg> --slots <arg> --yes --timeout <arg> ---pepeline <arg>
下面我們介紹一下上述命令參數(shù)說明:
host:port:比傳參數(shù),集群內(nèi)任意節(jié)點地址,用來獲取整個集群信息。
--form:制定源節(jié)點的id,如果有多個源節(jié)點,則使用逗號分割。
--to:需要遷移的目標(biāo)節(jié)點id,并且目標(biāo)節(jié)點只能指定一個。
--slots:需要遷移槽的總數(shù)量。
--yes:當(dāng)打印出reshard執(zhí)行計劃時,是否需要用戶輸入yes確認(rèn)后再執(zhí)行reshard。
--timeout:控制每次migrate操作的超時時間,默認(rèn)為60000毫秒。
--pipeline:控制每次批量遷移鍵的數(shù)量,默認(rèn)為10。
下面我們使用reshard命令遷移剩余槽的數(shù)據(jù)。
上述命令執(zhí)行完后reshard命令會提示我們輸入遷移槽的數(shù)量,我們暫時輸入4096。
當(dāng)我們輸入完遷移槽的數(shù)量后,會提示我們輸入目標(biāo)節(jié)點ID,我們輸入6385節(jié)點ID。
同樣,我們輸入完目標(biāo)節(jié)點后,會提示我們輸入輸入源節(jié)點ID,也就是主節(jié)點ID,所以我們輸入6379、6380、6381三個主節(jié)點ID,并且已done命令結(jié)束。
當(dāng)輸入完上述命令后,會打印出所有槽從源節(jié)點到目標(biāo)節(jié)點的計劃,并讓我們輸入yes命令后才會繼續(xù)執(zhí)行遷移工作。
輸入yes命令后在通過cluster nodes命令查看節(jié)點狀態(tài)。
下面我們還有最后一個步驟,就是當(dāng)初我們雖然把6385和6386節(jié)點添加到了集群,并且已經(jīng)將部分槽和數(shù)據(jù)遷移到了6385節(jié)點上,但該節(jié)點并沒有相應(yīng)的從節(jié)點,所以下面的步驟就是將6386節(jié)點設(shè)置為6385節(jié)點的從節(jié)點。
以上是“在Redis中如何對集群進(jìn)行擴(kuò)容”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!
免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。