溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么

發(fā)布時(shí)間:2021-11-22 10:03:20 來源:億速云 閱讀:199 作者:iii 欄目:云計(jì)算

這篇文章主要講解了“KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么”,文中的講解內(nèi)容簡單清晰,易于學(xué)習(xí)與理解,下面請(qǐng)大家跟著小編的思路慢慢深入,一起來研究和學(xué)習(xí)“KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么”吧!

【Topic】

Topic,我們稱之為主題。一句話概括它的作用:Topic是我們進(jìn)行生產(chǎn)/消費(fèi)的宏觀概念。

翻譯一下:就是我們生產(chǎn)者在生產(chǎn)消息的時(shí)候,要指定某個(gè)Topic;我們消費(fèi)者在消費(fèi)消息的時(shí)候,也要指定某些Topic。

KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么

我們?cè)偌?xì)究一下上面的話,為什么說Topic是一個(gè)宏觀的概念呢?

【Partition】

Partition,我們稱之為分區(qū)。一句話概括它的作用:Partition是我們進(jìn)行生產(chǎn)/消費(fèi)的真正實(shí)體。

翻譯一下:就是我們生產(chǎn)者在生產(chǎn)消息的時(shí)候,實(shí)際上是寫到了某個(gè)Topic的某個(gè)分區(qū)中;我們消費(fèi)者在消費(fèi)消息的時(shí)候,實(shí)際上也是消費(fèi)的某個(gè)Topic的某些分區(qū)。

KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么

從上圖,我們就可以明白一件事:Topic是某一類消息的邏輯集合,內(nèi)部包含一個(gè)個(gè)分區(qū)實(shí)體,我們生產(chǎn)消費(fèi)的實(shí)際對(duì)象都是某個(gè)Topic的某個(gè)分區(qū)。

就像上圖中的,【A-Topic-0】,這是什么意思呢,也就是【主題名稱-分區(qū)編號(hào)】

主題名稱呢,一般代表著這個(gè)Topic是用來存放什么類型的數(shù)據(jù)的,例如Order-Topic,就是用來存放訂單相關(guān)的數(shù)據(jù)的。

分區(qū)編號(hào)呢,就是我們?cè)趧?chuàng)建Topic的時(shí)候需要指定分區(qū)個(gè)數(shù),上圖中就有兩個(gè)Partition,然后分區(qū)的編號(hào)都是從0開始的,所以我們就能看到這樣的一個(gè)表示。

【Replica】

Replica,我們稱之為副本。一句話概括它的作用:Replica是針對(duì)Partition進(jìn)行數(shù)據(jù)冗余,以實(shí)現(xiàn)數(shù)據(jù)的的高可靠,還有整個(gè)服務(wù)的高可用(這個(gè)后續(xù)章節(jié)細(xì)說)。

翻譯一下:副本就是把某個(gè)分區(qū)的數(shù)據(jù)全量拷貝N份,然后分散到不同的機(jī)器上,這樣就能防止某臺(tái)機(jī)器宕機(jī)之后數(shù)據(jù)丟失的問題。

KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么

以上圖為例,存在以下角色:

主題名稱:A-Topic

分區(qū)數(shù)量:2

副本數(shù)量:3

上圖就是一個(gè)KAFKA集群完整的角色模型概覽圖,我們最后一起統(tǒng)一概述一下上面的三個(gè)角色:

Topic是一類消息的邏輯概念,而實(shí)際上進(jìn)行生產(chǎn)消費(fèi)的是Topic下的一個(gè)個(gè)分區(qū),而每個(gè)分區(qū)會(huì)有一份份的數(shù)據(jù)冗余分在在集群不同Broker上,這些數(shù)據(jù)冗余,我們稱之為Replica(副本)。

感謝各位的閱讀,以上就是“KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么”的內(nèi)容了,經(jīng)過本文的學(xué)習(xí)后,相信大家對(duì)KAFKA架構(gòu)設(shè)計(jì)中的主要角色是什么這一問題有了更深刻的體會(huì),具體使用情況還需要大家實(shí)踐驗(yàn)證。這里是億速云,小編將為大家推送更多相關(guān)知識(shí)點(diǎn)的文章,歡迎關(guān)注!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI