溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Java中關(guān)于消息隊(duì)列的面試題有哪些

發(fā)布時(shí)間:2021-08-07 10:30:39 來源:億速云 閱讀:266 作者:小新 欄目:開發(fā)技術(shù)

這篇文章將為大家詳細(xì)講解有關(guān)Java中關(guān)于消息隊(duì)列的面試題有哪些,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。

    面試題1:說說你對消息隊(duì)列的理解,消息隊(duì)列為了解決什么問題?

    我們公司業(yè)務(wù)系統(tǒng)一開始體量較小,很多組件都是單機(jī)版就足夠,后來隨著用戶量逐漸擴(kuò)大,我們程序也采用了微服務(wù)的設(shè)計(jì)思想,把很多服務(wù)進(jìn)行了拆分,但后來在一些秒殺搶票活動或高頻業(yè)務(wù)中,服務(wù)依舊扛不住大量QPS,因此我們引入了消息隊(duì)列來優(yōu)化該類問題。

    消息隊(duì)列應(yīng)用的場景大致分為三類:解耦、異步削峰

    解耦

    消息隊(duì)列類似設(shè)計(jì)模式中的觀察者模式(Observer)發(fā)布-訂閱模式(Pub-Sub)。生產(chǎn)者生成和發(fā)送消息到消息隊(duì)列,消費(fèi)者從消息隊(duì)列中取走消息進(jìn)行處理,稱為消費(fèi),使用消息隊(duì)列將“生產(chǎn)者”和“消費(fèi)者”之間的操作關(guān)聯(lián)解耦,易于擴(kuò)展。

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    比如系統(tǒng)A為支付系統(tǒng),一開始用戶支付完調(diào)用日志記錄系統(tǒng)B記錄就完了,后來內(nèi)容越來越多,支付完成要調(diào)用加積分系統(tǒng)C、短信通知系統(tǒng)D、優(yōu)惠券系統(tǒng)E等等…

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    這個(gè)場景中,A 系統(tǒng)跟其它各種亂七八糟的系統(tǒng)嚴(yán)重耦合,A 系統(tǒng)產(chǎn)生一條支付成功的數(shù)據(jù),很多系統(tǒng)接口都需要 A 系統(tǒng)調(diào)用把支付成功的數(shù)據(jù)發(fā)送過去。A 系統(tǒng)程序員要時(shí)刻考慮這些問題:

    • 其他系統(tǒng)如果掛了該咋辦?是不是直接程序拋異常了?

    • 一天到晚加業(yè)務(wù),每次都重新部署?領(lǐng)導(dǎo)是不是狗?

    那如果引入 MQ,A 系統(tǒng)產(chǎn)生一條數(shù)據(jù),發(fā)送到 MQ 里面去,每個(gè)子系統(tǒng)加上對消息隊(duì)列中支付成功消息的訂閱,持續(xù)監(jiān)聽就可以了,哪個(gè)系統(tǒng)需要數(shù)據(jù)自己去 MQ 里面消費(fèi)。如果新系統(tǒng)需要數(shù)據(jù),直接從 MQ 里消費(fèi)即可;如果某個(gè)系統(tǒng)不需要這條數(shù)據(jù)了,就取消對 MQ 消息的消費(fèi)即可。

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    這樣下來,A系統(tǒng)壓根兒不需要去考慮要給誰發(fā)送數(shù)據(jù),不需要維護(hù)這個(gè)代碼,也不需要考慮人家是否調(diào)用成功、失敗超時(shí)等情況,我只負(fù)責(zé)把支付成功的信息放到MQ里就行了,至于能否正常加積分、能否正常短信通知,管我鳥事!~~可見,通過一個(gè) MQ,Pub/Sub 發(fā)布訂閱消息這么一個(gè)模型,A 系統(tǒng)就跟其它系統(tǒng)徹底解耦了。

    面試官:哦,那我聽出來了,你這是喜歡甩鍋??!來,簡歷還你。

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    我:額。。不,我開玩笑的,當(dāng)然不能這樣做,這里其實(shí)涉及到MQ在分布式事務(wù)中數(shù)據(jù)一致性的問題;聽我跟您解釋。

    數(shù)據(jù)一致性

    這個(gè)其實(shí)是分布式服務(wù)本身就存在的一個(gè)問題,不僅僅是消息隊(duì)列的問題,但是放在這里說是因?yàn)橛昧讼㈥?duì)列這個(gè)問題會更明顯。

    就像咱們上面說的,你支付成功的服務(wù)自己保證自己的邏輯成功處理了,你成功發(fā)了消息,但是短信系統(tǒng),積分系統(tǒng)等等這么多系統(tǒng),他們成功還是失敗你就不管了?當(dāng)然不行,這樣坑隊(duì)友的行為,狄大人都幫不了你~

    怎么辦?那就把所有的服務(wù)都放到一個(gè)事務(wù)里,所有都成功成功才能算這一次下單是成功的,要成功一起成功,要失敗一起失敗。

    異步

    A 系統(tǒng)接收一個(gè)請求,需要在自己本地寫庫,還需要在 BCD 三個(gè)系統(tǒng)寫庫,自己本地寫庫要 3ms,BCD 三個(gè)系統(tǒng)分別寫庫要 300ms、400ms、200ms。最終請求總延時(shí)是 3 + 300 + 400 + 200 = 903ms,接近 1秒,用戶感覺搞個(gè)毛線?慢的一批。

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    一般互聯(lián)網(wǎng)類的企業(yè),對于用戶直接的操作,一般要求是每個(gè)請求都必須在 200 ms 以內(nèi)完成,對用戶幾乎是無感知的,如果1秒足以說明該系統(tǒng)不可用,垃圾系統(tǒng)。

    如果這里使用了消息隊(duì)列,那么 A 系統(tǒng)連續(xù)發(fā)送 3 條消息到 MQ 隊(duì)列中,假如耗時(shí) 5ms,A 系統(tǒng)從接受一個(gè)請求到返回響應(yīng)給用戶,總時(shí)長是 3 + 5 = 8ms,對于用戶而言,其實(shí)感覺上就是點(diǎn)個(gè)按鈕,8ms 以后就直接返回了,體驗(yàn)感很好

    削峰

    比如我們系統(tǒng)有代售搶票業(yè)務(wù),平時(shí)每天QPS也就50左右,A 系統(tǒng)風(fēng)平浪靜。結(jié)果每次一到春運(yùn)搶票,每秒并發(fā)請求數(shù)量突然會暴增到10000以上。但是系統(tǒng)是直接基于 MySQL 的,大量的請求直接打到 MySQL,比如一般MySQL能抗2000條請求,現(xiàn)在每秒10000 條 SQL,可能就直接把 MySQL 給打死了,導(dǎo)致系統(tǒng)崩潰。但是高峰期一過就又沒人了,QPS回到50,對整個(gè)系統(tǒng)幾乎沒有任何的壓力。

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    如果這里使用 MQ,每秒 1w 個(gè)請求寫入 MQ,A 系統(tǒng)每秒鐘最多處理 2000 個(gè)請求,因?yàn)?MySQL 每秒鐘最多處理 2k 個(gè)。A 系統(tǒng)從 MQ 中慢慢拉取請求,每秒鐘就拉取 2k 個(gè)請求,不要超過自己每秒能處理的最大請求數(shù)量就 ok了,這樣下來,哪怕是高峰期的時(shí)候,A 系統(tǒng)也不會掛掉。當(dāng)然了,用戶的響應(yīng)時(shí)間肯定會受影響,畢竟秒殺嘛,只要把前多少條請求處理好,其余的搶票失敗就行了。

    另外,MQ 每秒鐘 1w 個(gè)請求進(jìn)來,只處理 2k 個(gè)請求出去,結(jié)果會導(dǎo)致在中午高峰期,可能有幾十萬甚至幾百萬的請求積壓在 MQ 中。

    這個(gè)短暫的高峰期積壓是 ok 的,因?yàn)楦叻迤谶^了之后,每秒鐘就 50 個(gè)請求進(jìn) MQ,但是A 系統(tǒng)依然會按照每秒 2k 個(gè)請求的速度在處理。所以說,只要高峰期一過,A 系統(tǒng)就會快速將積壓的消息給消費(fèi)掉。

    追問1:消息隊(duì)列有什么優(yōu)缺點(diǎn)

    • 系統(tǒng)可用性降低

    系統(tǒng)引入的外部依賴越多,越容易掛掉。本來你就是 A 系統(tǒng)調(diào)用 BCD 三個(gè)系統(tǒng)的接口就好了,人 ABCD 四個(gè)系統(tǒng)好好的,沒啥問題,你偏加個(gè) MQ 進(jìn)來,萬一 MQ 掛了咋整,MQ 一掛,整套系統(tǒng)崩潰的,你不就完了?如何保證消息隊(duì)列的高可用?

    • 系統(tǒng)復(fù)雜度提高

    硬生生加個(gè) MQ 進(jìn)來,你怎么保證消息一定被消費(fèi)?如何避免消息重復(fù)投遞或重復(fù)消費(fèi)?數(shù)據(jù)丟失怎么辦?怎么保證消息傳遞的順序性?

    • 一致性問題

    A 系統(tǒng)處理完了直接返回成功了,人都以為你這個(gè)請求就成功了;但是問題是,要是 BCD 三個(gè)系統(tǒng)那里,BD 兩個(gè)系統(tǒng)寫庫成功了,結(jié)果 C 系統(tǒng)寫庫失敗了,咋整?你這數(shù)據(jù)就不一致了。

    面試題2:對于消息中間機(jī),你們是怎么做技術(shù)選型的?

    目前市面上比較主流的消息隊(duì)列中間件主要有,Kafka、ActiveMQ、RabbitMQ、RocketMQ 等。

    ActiveMQ和RabbitMQ這兩由于吞吐量的原因,只有業(yè)務(wù)體量一般的公司在用,RabbitMQ由于是erlang語言開發(fā)的,我們都不了解,因此擴(kuò)展和維護(hù)成本都很高,查個(gè)問題都頭疼。

    Kafka和RocketMQ一直在各自擅長的領(lǐng)域發(fā)光發(fā)亮,兩者的吞吐量、可靠性、時(shí)效性等都很可觀。

    我們通過圖表看看這幾個(gè)消息中間機(jī)的對比:

    Java中關(guān)于消息隊(duì)列的面試題有哪些

    大家其實(shí)一下子就能看到差距了,就拿吞吐量來說,早期比較活躍的ActiveMQ 和RabbitMQ基本上不是后兩者的對手了,在現(xiàn)在這樣大數(shù)據(jù)的年代吞吐量是真的很重要。

    面試題3:如何確保消息正確地發(fā)送至 RabbitMQ?如何確保消息接收方消費(fèi)了消息?

    發(fā)送方確認(rèn)模式

    將信道設(shè)置成confirm模式(發(fā)送方確認(rèn)模式),則所有在信道上發(fā)布的消息都會被指派一個(gè)唯一的ID。

    一旦消息被投遞到目的隊(duì)列后,或者消息被寫入磁盤后(可持久化的消息),信道會發(fā)送一個(gè)確認(rèn)給生產(chǎn)者(包含消息唯一ID)。

    如果RabbitMQ發(fā)生內(nèi)部錯(cuò)誤從而導(dǎo)致消息丟失,會發(fā)送一條Nack(not acknowledged,未確認(rèn))消息。

    發(fā)送方確認(rèn)模式是異步的,生產(chǎn)者應(yīng)用程序在等待確認(rèn)的同時(shí),可以繼續(xù)發(fā)送消息。當(dāng)確認(rèn)消息到達(dá)生產(chǎn)者應(yīng)用程序,生產(chǎn)者應(yīng)用程序的回調(diào)方法就會被觸發(fā)來處理確認(rèn)消息。

    接收方確認(rèn)機(jī)制

    消費(fèi)者接收每一條消息后都必須進(jìn)行確認(rèn)(消息接收和消息確認(rèn)是兩個(gè)不同操作)。只有消費(fèi)者確認(rèn)了消息,RabbitMQ才能安全地把消息從隊(duì)列中刪除。

    這里并沒有用到超時(shí)機(jī)制,RabbitMQ僅通過Consumer的連接中斷來確認(rèn)是否需要重新發(fā)送消息。也就是說,只要連接不中斷,RabbitMQ給了Consumer足夠長的時(shí)間來處理消息。保證數(shù)據(jù)的最終一致性;

    追問1:如何保證MQ消息的可靠傳輸?

    以我們常用的RabbitMQ為例,消息不可靠的情況可能是消息丟失,劫持等原因;

    丟失又分為:生產(chǎn)者丟失消息、消息隊(duì)列丟失消息、消費(fèi)者丟失消息;

    生產(chǎn)者丟失消息:從生產(chǎn)者弄丟數(shù)據(jù)這個(gè)角度來看,RabbitMQ提供confirm模式來確保生產(chǎn)者不丟消息;

    confirm模式用的居多:一旦channel進(jìn)入confirm模式,所有在該信道上發(fā)布的消息都將會被指派一個(gè)唯一的ID(從1開始),一旦消息被投遞到所有匹配的隊(duì)列之后;RabbitMQ就會發(fā)送一個(gè)ACK給生產(chǎn)者(包含消息的唯一ID),這就使得生產(chǎn)者知道消息已經(jīng)正確到達(dá)目的隊(duì)列了;

    如果rabbitMQ沒能處理該消息,則會發(fā)送一個(gè)Nack消息給你,你可以進(jìn)行重試操作。

    消息隊(duì)列丟數(shù)據(jù):消息持久化。

    處理消息隊(duì)列丟數(shù)據(jù)的情況,一般是開啟持久化磁盤的配置。

    持久化配置和confirm機(jī)制配合使用,在消息持久化磁盤后,再給生產(chǎn)者發(fā)送一個(gè)Ack信號。

    這樣,如果消息持久化磁盤之前,rabbitMQ陣亡了,那么生產(chǎn)者收不到Ack信號,生產(chǎn)者會自動重發(fā)。

    關(guān)于“Java中關(guān)于消息隊(duì)列的面試題有哪些”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,使各位可以學(xué)到更多知識,如果覺得文章不錯(cuò),請把它分享出去讓更多的人看到。

    向AI問一下細(xì)節(jié)

    免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

    AI