溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法是怎樣的

發(fā)布時(shí)間:2021-10-18 09:41:36 來源:億速云 閱讀:172 作者:柒染 欄目:數(shù)據(jù)庫

SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法是怎樣的,針對(duì)這個(gè)問題,這篇文章詳細(xì)介紹了相對(duì)應(yīng)的分析和解答,希望可以幫助更多想解決這個(gè)問題的小伙伴找到更簡(jiǎn)單易行的方法。

最近做某項(xiàng)目的數(shù)據(jù)庫分析,要實(shí)現(xiàn)對(duì)海量數(shù)據(jù)的導(dǎo)入問題,就是最多把200萬條數(shù)據(jù)一次導(dǎo)入sqlserver中,如果使用普通的insert語句進(jìn)行寫出的話,恐怕沒個(gè)把小時(shí)完不成任務(wù),先是考慮使用bcp,但這是基于命令行的,對(duì)用戶來說友好性太差,實(shí)際不大可能使用;最后決定使用BULK INSERT語句實(shí)現(xiàn),BULK INSERT也可以實(shí)現(xiàn)大數(shù)據(jù)量的導(dǎo)入,而且可以通過編程實(shí)現(xiàn),界面可以做的非常友好,它的速度也很高:導(dǎo)入100萬條數(shù)據(jù)不到20秒中,在速度上恐怕無出其右者。 但是使用這種方式也有它的幾個(gè)缺點(diǎn): 1.需要獨(dú)占接受數(shù)據(jù)的表 2.會(huì)產(chǎn)生大量的日志 3.從中取數(shù)據(jù)的文件有格式限制 但相對(duì)于它的速度來說,這些缺點(diǎn)都是可以克服的,而且你如果愿意犧牲一點(diǎn)速度的話,還可以做更精確的控制,甚至可以控制每一行的插入。 對(duì)與產(chǎn)生占用大量空間的日志的情況,我們可以采取在導(dǎo)入前動(dòng)態(tài)更改數(shù)據(jù)庫的日志方式為大容量日志記錄恢復(fù)模式,這樣就不會(huì)記錄日志了,導(dǎo)入結(jié)束后再恢復(fù)原來的數(shù)據(jù)庫日志記錄方式。 具體的一個(gè)語句我們可以這樣寫:復(fù)制代碼 代碼如下: alter database taxi set RECOVERY BULK_LOGGED BULK INSERT taxi..detail FROM 'e:\out.txt' WITH (DATAFILETYPE = 'char',FIELDTERMINATOR = ',',ROWTERMINATOR = '\n', TABLOCK ) alter database taxi set RECOVERY FULL

這個(gè)語句將從e:\out.txt導(dǎo)出數(shù)據(jù)文件到數(shù)據(jù)庫taxi的detail表中。

關(guān)于SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法是怎樣的問題的解答就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,如果你還有很多疑惑沒有解開,可以關(guān)注億速云行業(yè)資訊頻道了解更多相關(guān)知識(shí)。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI