溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

Hive中如何選擇輸入格式

發(fā)布時(shí)間:2022-03-11 13:57:22 來源:億速云 閱讀:142 作者:小新 欄目:web開發(fā)

這篇文章主要介紹了Hive中如何選擇輸入格式,具有一定借鑒價(jià)值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。

輸入格式選擇

Hive支持TEXTFILE, SEQUENCEFILE, AVRO, RCFILE, ORC,以及PARQUET文件格式,可以通過兩種方式指定表的文件格式:

  • CREATE TABLE … STORE AS :即在建表時(shí)指定文件格式,默認(rèn)是TEXTFILE
  • ALTER TABLE … [PARTITION partition_spec] SET FILEFORMAT :修改具體表的文件格式

如果未指定文件存儲(chǔ)格式,則默認(rèn)使用的是參數(shù)hive.default.fileformat設(shè)定的格式。

如果數(shù)據(jù)存儲(chǔ)在小于塊大小的小文件中,則可以使用SEQUENCE文件格式。如果要以減少存儲(chǔ)空間并提高性能的優(yōu)化方式存儲(chǔ)數(shù)據(jù),則可以使用ORC文件格式,而當(dāng)列中嵌套的數(shù)據(jù)過多時(shí),Parquet格式會(huì)很有用。因此,需要根據(jù)擁有的數(shù)據(jù)確定輸入文件格式。

感謝你能夠認(rèn)真閱讀完這篇文章,希望小編分享的“Hive中如何選擇輸入格式”這篇文章對(duì)大家有幫助,同時(shí)也希望大家多多支持億速云,關(guān)注億速云行業(yè)資訊頻道,更多相關(guān)知識(shí)等著你來學(xué)習(xí)!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI