溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

Hive中如何多次INSERT單次掃描表

發(fā)布時(shí)間:2022-03-11 13:50:41 來源:億速云 閱讀:456 作者:小新 欄目:開發(fā)技術(shù)

小編給大家分享一下Hive中如何多次INSERT單次掃描表,希望大家閱讀完這篇文章之后都有所收獲,下面讓我們一起去探討吧!

多次INSERT單次掃描表

默認(rèn)情況下,Hive會(huì)執(zhí)行多次表掃描。因此,如果要在某張hive表中執(zhí)行多個(gè)操作,建議使用一次掃描并使用該掃描來執(zhí)行多個(gè)操作。

比如將一張表的數(shù)據(jù)多次查詢出來裝載到另外一張表中。如下面的示例,表my_table是一個(gè)分區(qū)表,分區(qū)字段為dt,如果需要在表中查詢2個(gè)特定的分區(qū)日期數(shù)據(jù),并將記錄裝載到2個(gè)不同的表中。

INSERT INTO temp_table_20201115 SELECT * FROM my_table WHERE dt ='2020-11-15';
INSERT INTO temp_table_20201116 SELECT * FROM my_table WHERE dt ='2020-11-16';

在以上查詢中,Hive將掃描表2次,為了避免這種情況,我們可以使用下面的方式:

FROM my_table
INSERT INTO temp_table_20201115 SELECT * WHERE dt ='2020-11-15'
INSERT INTO temp_table_20201116 SELECT * WHERE dt ='2020-11-16'

這樣可以確保只對(duì)my_table表執(zhí)行一次掃描,從而可以大大減少執(zhí)行的時(shí)間和資源。

看完了這篇文章,相信你對(duì)“Hive中如何多次INSERT單次掃描表”有了一定的了解,如果想了解更多相關(guān)知識(shí),歡迎關(guān)注億速云行業(yè)資訊頻道,感謝各位的閱讀!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI