溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Kakfa的原理和使用方法

發(fā)布時間:2021-07-05 16:11:37 來源:億速云 閱讀:187 作者:chen 欄目:大數據

這篇文章主要講解了“Kakfa的原理和使用方法”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“Kakfa的原理和使用方法”吧!

kafka是一種分布式的、基于發(fā)布/訂閱的消息系統(tǒng)

1、kafka隊列為什么吞吐量大

a、生產消息時kafka是順序寫入硬盤

b、Kafka的數據并不是實時的寫入硬盤而是使用內存映射文件技術(mmap)

      Kafka提供了一個參數——producer.type來控制是不是主動flush 即同步和異步

c、消費者消費消息時讀取數據的時候是以文件的方式零拷貝從內核空間直接輸入到端口上

d、Kafaka消息存儲是基于partiton,可以橫行擴展

2、kafaka Broker Server

leader選舉

Kakfa的原理和使用方法

Kakfa的原理和使用方法

防止kafka丟消息

1、生產端使用同步發(fā)送、設置required.acks屬性為-1(主從同時確認)

0:不確認,1:主確認

2、設置消息ID保證消息不重復

3、消費端設置delivery屬性為at least one 至少消費一次

先消費再確認。通過業(yè)務主鍵保證冪等

感謝各位的閱讀,以上就是“Kakfa的原理和使用方法”的內容了,經過本文的學習后,相信大家對Kakfa的原理和使用方法這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是億速云,小編將為大家推送更多相關知識點的文章,歡迎關注!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內容(圖片、視頻和文字)以原創(chuàng)、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI