主頁(yè) > 知識(shí)庫(kù) > SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法

SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法

熱門標(biāo)簽:知名電銷機(jī)器人價(jià)格 菏澤語(yǔ)音電銷機(jī)器人加盟公司 地圖標(biāo)注牌 長(zhǎng)沙智能外呼系統(tǒng) 廣東防封卡外呼系統(tǒng)原理是什么 湖南電腦外呼系統(tǒng)平臺(tái) 電銷機(jī)器人公司 需要哪些牌照 分享百度地圖標(biāo)注多個(gè)位置 外呼系統(tǒng)改進(jìn)
最近做某項(xiàng)目的數(shù)據(jù)庫(kù)分析,要實(shí)現(xiàn)對(duì)海量數(shù)據(jù)的導(dǎo)入問(wèn)題,就是最多把200萬(wàn)條數(shù)據(jù)一次導(dǎo)入sqlserver中,如果使用普通的insert語(yǔ)句進(jìn)行寫出的話,恐怕沒(méi)個(gè)把小時(shí)完不成任務(wù),先是考慮使用bcp,但這是基于命令行的,對(duì)用戶來(lái)說(shuō)友好性太差,實(shí)際不大可能使用;最后決定使用BULK INSERT語(yǔ)句實(shí)現(xiàn),BULK INSERT也可以實(shí)現(xiàn)大數(shù)據(jù)量的導(dǎo)入,而且可以通過(guò)編程實(shí)現(xiàn),界面可以做的非常友好,它的速度也很高:導(dǎo)入100萬(wàn)條數(shù)據(jù)不到20秒中,在速度上恐怕無(wú)出其右者。
但是使用這種方式也有它的幾個(gè)缺點(diǎn):
1.需要獨(dú)占接受數(shù)據(jù)的表
2.會(huì)產(chǎn)生大量的日志
3.從中取數(shù)據(jù)的文件有格式限制
但相對(duì)于它的速度來(lái)說(shuō),這些缺點(diǎn)都是可以克服的,而且你如果愿意犧牲一點(diǎn)速度的話,還可以做更精確的控制,甚至可以控制每一行的插入。
對(duì)與產(chǎn)生占用大量空間的日志的情況,我們可以采取在導(dǎo)入前動(dòng)態(tài)更改數(shù)據(jù)庫(kù)的日志方式為大容量日志記錄恢復(fù)模式,這樣就不會(huì)記錄日志了,導(dǎo)入結(jié)束后再恢復(fù)原來(lái)的數(shù)據(jù)庫(kù)日志記錄方式。
具體的一個(gè)語(yǔ)句我們可以這樣寫: 
復(fù)制代碼 代碼如下:

alter database taxi
set RECOVERY BULK_LOGGED
BULK INSERT taxi..detail FROM 'e:\out.txt'
WITH ( 
DATAFILETYPE = 'char', 
FIELDTERMINATOR = ',', 
ROWTERMINATOR = '\n',
TABLOCK
)
alter database taxi
set RECOVERY FULL

這個(gè)語(yǔ)句將從e:\out.txt導(dǎo)出數(shù)據(jù)文件到數(shù)據(jù)庫(kù)taxi的detail表中。

標(biāo)簽:天水 珠海 呼和浩特 福建 商洛 泉州 美容院 西寧

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法》,本文關(guān)鍵詞  SQL,Server,海量,數(shù)據(jù),導(dǎo)入,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問(wèn)題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無(wú)關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法》相關(guān)的同類信息!
  • 本頁(yè)收集關(guān)于SQL Server 海量數(shù)據(jù)導(dǎo)入的最快方法的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章