Flume是一個分布式的，可靠的，高可用的系統(tǒng)，用于收集，聚合和移動大量的日志數(shù)據(jù)。其主要作用是實時地從不同的數(shù)據(jù)源（如Web服務(wù)器，數(shù)據(jù)庫，應(yīng)用程序日志等）收集數(shù)據(jù)，并將數(shù)據(jù)傳輸?shù)紿adoop生態(tài)系統(tǒng)中的存儲系統(tǒng)（如HDFS，HBase等）或其他數(shù)據(jù)處理系統(tǒng)中。通過Flume，用戶可以方便地構(gòu)建一個數(shù)據(jù)流管道，實現(xiàn)數(shù)據(jù)的采集，傳輸和處理。Flume提供了各種Source，Channel和Sink組件，用戶可以根據(jù)自己的需求配置這些組件來構(gòu)建數(shù)據(jù)流管道。
億速云公眾號
手機(jī)網(wǎng)站二維碼
