濮阳杆衣贸易有限公司

主頁 > 知識庫 > SQL Server 海量數(shù)據(jù)導入的最快方法

SQL Server 海量數(shù)據(jù)導入的最快方法

熱門標簽:知名電銷機器人價格 菏澤語音電銷機器人加盟公司 地圖標注牌 長沙智能外呼系統(tǒng) 廣東防封卡外呼系統(tǒng)原理是什么 湖南電腦外呼系統(tǒng)平臺 電銷機器人公司 需要哪些牌照 分享百度地圖標注多個位置 外呼系統(tǒng)改進
最近做某項目的數(shù)據(jù)庫分析,要實現(xiàn)對海量數(shù)據(jù)的導入問題,就是最多把200萬條數(shù)據(jù)一次導入sqlserver中,如果使用普通的insert語句進行寫出的話,恐怕沒個把小時完不成任務,先是考慮使用bcp,但這是基于命令行的,對用戶來說友好性太差,實際不大可能使用;最后決定使用BULK INSERT語句實現(xiàn),BULK INSERT也可以實現(xiàn)大數(shù)據(jù)量的導入,而且可以通過編程實現(xiàn),界面可以做的非常友好,它的速度也很高:導入100萬條數(shù)據(jù)不到20秒中,在速度上恐怕無出其右者。
但是使用這種方式也有它的幾個缺點:
1.需要獨占接受數(shù)據(jù)的表
2.會產(chǎn)生大量的日志
3.從中取數(shù)據(jù)的文件有格式限制
但相對于它的速度來說,這些缺點都是可以克服的,而且你如果愿意犧牲一點速度的話,還可以做更精確的控制,甚至可以控制每一行的插入。
對與產(chǎn)生占用大量空間的日志的情況,我們可以采取在導入前動態(tài)更改數(shù)據(jù)庫的日志方式為大容量日志記錄恢復模式,這樣就不會記錄日志了,導入結束后再恢復原來的數(shù)據(jù)庫日志記錄方式。
具體的一個語句我們可以這樣寫: 
復制代碼 代碼如下:

alter database taxi
set RECOVERY BULK_LOGGED
BULK INSERT taxi..detail FROM 'e:\out.txt'
WITH ( 
DATAFILETYPE = 'char', 
FIELDTERMINATOR = ',', 
ROWTERMINATOR = '\n',
TABLOCK
)
alter database taxi
set RECOVERY FULL

這個語句將從e:\out.txt導出數(shù)據(jù)文件到數(shù)據(jù)庫taxi的detail表中。

標簽:天水 珠海 呼和浩特 福建 商洛 泉州 美容院 西寧

巨人網(wǎng)絡通訊聲明:本文標題《SQL Server 海量數(shù)據(jù)導入的最快方法》,本文關鍵詞  SQL,Server,海量,數(shù)據(jù),導入,;如發(fā)現(xiàn)本文內容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內容系統(tǒng)采集于網(wǎng)絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《SQL Server 海量數(shù)據(jù)導入的最快方法》相關的同類信息!
  • 本頁收集關于SQL Server 海量數(shù)據(jù)導入的最快方法的相關信息資訊供網(wǎng)民參考!
  • 推薦文章
    禹州市| 贵德县| 杂多县| 漳平市| 赣州市| 雷山县| 云浮市| 双流县| 应城市| 邹城市| 舟山市| 尚义县| 昂仁县| 景宁| 四平市| 阿合奇县| 龙南县| 广平县| 信阳市| 浪卡子县| 祁阳县| 渭源县| 吉木乃县| 永新县| 东安县| 隆回县| 绍兴市| 丹寨县| 新丰县| 梧州市| 福建省| 河源市| 香港 | 太保市| 兴城市| 镇坪县| 兖州市| 进贤县| 大港区| 云阳县| 军事|