溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Apache Hudi與Impala完成整合的示例分析

發(fā)布時間:2021-12-10 09:52:09 來源:億速云 閱讀:537 作者:柒染 欄目:大數(shù)據(jù)

Apache Hudi與Impala完成整合的示例分析,相信很多沒有經(jīng)驗的人對此束手無策,為此本文總結(jié)了問題出現(xiàn)的原因和解決方法,通過這篇文章希望你能解決這個問題。

Hudi: Apache Hudi是一個開源的,支持插入、更新、刪除的增量數(shù)據(jù)湖處理框架,可助力構(gòu)建企業(yè)級數(shù)據(jù)湖。
Impala: Apache Impala是一個開源的大規(guī)模并行處理SQL查詢引擎,能查詢存儲在Hadoop的HDFS和HBase中的PB級大數(shù)據(jù)。

Impala作為查詢引擎可架設(shè)在Hudi表之上,Impala社區(qū)關(guān)于支持對Hudi表的查詢的commit已經(jīng)提交至master主干分支,這表明在下個Impala版本中便可正式使用該特性,也意味著用戶可使用Impala查詢Hudi表中數(shù)據(jù),悉知Hudi也是第一個被Impala支持查詢的數(shù)據(jù)湖框架。至此Hudi支持的查詢引擎有Hive/SparkSQL/Presto/Impala,已經(jīng)涵蓋了越來越多的SQL查詢引擎,Hudi周邊生態(tài)也越發(fā)完善,發(fā)展也越來越迅速。

如果你已經(jīng)使用了Impala和Hudi,那么不妨嘗試使用Impala來查詢Hudi表數(shù)據(jù)。

看完上述內(nèi)容,你們掌握Apache Hudi與Impala完成整合的示例分析的方法了嗎?如果還想學(xué)到更多技能或想了解更多相關(guān)內(nèi)容,歡迎關(guān)注億速云行業(yè)資訊頻道,感謝各位的閱讀!

向AI問一下細節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI