#

kafka

  • kafka數(shù)據(jù)遷移

             kafka數(shù)據(jù)遷移操作流程:   此次數(shù)據(jù)遷移主要是針對(duì)Isr自動(dòng)同步異常,而進(jìn)行手動(dòng)干預(yù)的操作。具體的故障截圖

    作者:DearArvin
    2020-07-22 12:47:09
  • kafka manager 搭建

    安裝kafka manager [root@emm-kafka01-10--174 ~]# cd /opt/ins/ [root@emm-kafka01-10--174 ins]# ll total

    作者:馬吉輝
    2020-07-22 10:49:18
  • apache-kafka集群部署

    前提:zk 什么是kafka 百度百科Kafka是一個(gè)分布式的、分區(qū)的、多復(fù)本的日志提交服務(wù)。它通過(guò)一種獨(dú)一無(wú)二的設(shè)計(jì)提供了一個(gè)消息系統(tǒng)的功能。目標(biāo)是為處理實(shí)時(shí)數(shù)據(jù)提供一個(gè)統(tǒng)一、高通量、低等待的平臺(tái)。

    作者:yr_linux運(yùn)維
    2020-07-22 10:39:23
  • flume 整合kafka

    1,安裝并成功能運(yùn)行flume2,安裝并成功能運(yùn)行kafka3,安裝并成功能運(yùn)行zookeeper4,開(kāi)始整合flume收集的數(shù)據(jù),寫(xiě)入kafkaa,修改flume的配置文加:vim  fl

    作者:crazy_charles
    2020-07-21 16:39:15
  • 網(wǎng)易Java研發(fā)崗二面:講講 kafka 維護(hù)消費(fèi)狀態(tài)跟蹤的方法

    網(wǎng)易面試真題:講講 kafka 維護(hù)消費(fèi)狀態(tài)跟蹤的方法?解析:大部分消息系統(tǒng)在 broker 端的維護(hù)消息被消費(fèi)的記錄:一個(gè)消息被分發(fā)到consumer 后 broker 就馬上進(jìn)行標(biāo)記或者等待 cu

    作者:java周某人
    2020-07-21 01:25:16
  • 排查logstash2.4升級(jí)到5.0版本后kafka不兼容問(wèn)題

    排查logstash3.4升級(jí)到5.0版本后kafka不兼容問(wèn)題參考文檔:/usr/share/logstash/vendor/bundle/jruby/1.9/gems/logstash-input

    作者:三杯水
    2020-07-20 17:55:00
  • 消息隊(duì)列之kafka(消費(fèi)語(yǔ)義)

    1. 消費(fèi)語(yǔ)義的介紹    at last once:至少消費(fèi)一次(對(duì)一條消息有可能多次消費(fèi),有可能會(huì)造成重復(fù)消費(fèi)數(shù)據(jù))     原因:Proudce

    作者:原生zzy
    2020-07-20 05:09:51
  • (版本定制)第15課:Spark Streaming源碼解讀之No Receivers徹底思考

    hu本期內(nèi)容:    1、Kafka解密背景: 目前No Receivers在企業(yè)中使用的越來(lái)越多,No Receivers具有更強(qiáng)的控制度,語(yǔ)義一致性。No Recei

    作者:Spark_2016
    2020-07-19 11:38:42
  • kafka分布式集群

    一、簡(jiǎn)介1、消息傳輸流程Kafka is a distributed,partitioned,replicated commit logservice。它提供了類似于JMS的特性,但是在設(shè)計(jì)實(shí)現(xiàn)上完全

    作者:蔣將將
    2020-07-19 07:00:21
  • 一次KAFKA消費(fèi)者異常引起的思考

    問(wèn)題描述: 線上出現(xiàn)一臺(tái)服務(wù)器特別慢,于是關(guān)閉了服務(wù)器上的kafka broker. 關(guān)閉后發(fā)現(xiàn)一些kafka consumer無(wú)法正常消費(fèi)數(shù)據(jù)了, 日志錯(cuò)誤:o.a.kakfa.clients.co

    作者:zhanjia
    2020-07-18 22:37:45