溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Hadoop生態(tài)系統(tǒng)組件有哪些

發(fā)布時間:2021-12-09 15:30:15 來源:億速云 閱讀:2460 作者:小新 欄目:云計算

這篇文章將為大家詳細講解有關Hadoop生態(tài)系統(tǒng)組件有哪些,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。

Hadoop生態(tài)系統(tǒng)的組件包括:

  • HDFS:分布式文件系統(tǒng)

  • YARN:資源管理和調(diào)度

  • MapReduce:并行計算框架

  • HBase:可擴展的分布式NoSQL數(shù)據(jù)庫

  • Hive:適合做ETL的大數(shù)據(jù)倉庫,支持SQL查詢語言,基于MapReduce

  • Impala:新型查詢系統(tǒng),提供交互式的SQL查詢

  • ZooKeeper:分布式應用程序協(xié)調(diào)服務

  • Spark:分布式內(nèi)存計算引擎,支持ETL、機器學習、Streaming和圖計算

  • Flume:分布式日志收集、聚合系統(tǒng)


  • Pig:大規(guī)模數(shù)據(jù)分析平臺

  • PrestoDB:大數(shù)據(jù)的分布式 SQL 查詢引擎

  • Phoenix:是Hbase的 SQL 驅(qū)動

  • Drill :加快Hadoop數(shù)據(jù)查詢的工具

  • Hue 是運營和開發(fā)Hadoop應用的圖形化用戶界面,功能及其強大


以服務體系劃分:

 計算云:虛擬主機/彈性計算/負載均衡QLB

  存儲云:GlusterFS/Swift/FastDFS/生產(chǎn)存儲/云盤

  服務云-數(shù)據(jù)庫:MySQL/Couchbase/Redis/MongoDB

  服務云-分布式中間件:RPC/MQ/ZooKeeper

  服務云-Hadoop:HDFS/MR/Hive/HBase

  服務云-實時計算:Spark/Storm/實時日志收集分析

關于“Hadoop生態(tài)系統(tǒng)組件有哪些”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI