SQL Server 2012中快速插入批量資料的示例及疑惑
分享一下我老師大神的人工智慧教程!零基礎,通俗易懂!http://blog.csdn.net/jiangjunshow
也歡迎大家轉載本篇文章。分享知識,造福人民,實現我們中華民族偉大復興!
今天在做一個案例演示時,在SQL Server 2012中使用Insert語句插入1萬條資料,結果遇到了一個奇怪的現象,現將過程分享出來,以供有興趣的同學參考。
附:我的測試環境為:
SQL Server 2012,命名例項
Microsoft SQL Server 2012 - 11.0.2100.60 (Intel X86)
Feb 10 2012 19:13:17
Copyright (c) Microsoft Corporation
Enterprise Edition on Windows NT 6.0 <X86> (Build 6002: Service Pack 2)
建立示例資料庫
IF OBJECT_ID('DemoPager2012') IS NOT NULLDROP DataBase DemoPager2012GOCREATE Database DemoPager2012GOUSE DemoPager2012GO
示例表,該表只有四個欄位。
/*Setup script to create the sample table and fill it withsample data.*/IF OBJECT_ID('Customers','U') IS NOT NULLDROP TABLE CustomersCREATE TABLE Customers ( CustomerID INT primary key identity(1,1),CustomerNumber CHAR(4),CustomerName VARCHAR (50),CustomerCity VARCHAR(20) )GO
現在展示批量插入10000條資料到該表中,語句如下:
TRUNCATE table CustomersGO----清除干擾查詢DBCC DROPCLEANBUFFERSDBCC FREEPROCCACHESET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();declare @i int=1while @i<=10000beginINSERT INTO Customers (CustomerNumber, CustomerName,CustomerCity)SELECT REPLACE(STR(@i, 4), ' ', '0'),'Customer ' + STR(@i,6),CHAR(65 + (@i % 26)) + '-City'set @[email protected]+1endselect [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO
該插入語句在SQL Server 2008 r2版本和SQL Server 2012版本中,測試結果如下:
令我驚訝的是,SQL Server 2012居然耗時達到5分多鐘,而SQL Server 2008R2版,只需要大約6秒鐘。更令人費解的是:查詢的I/O統計和elapsed time,在這兩個版本中幾乎一樣。對此異象,我只能理解為每次Insert時的毫秒級精度可能不足以度量該次操作帶來的細小差距,然而累積起來就非常可觀了。
解決方案一:使用 Set NoCount On,效果立竿見影
TRUNCATE table CustomersGO----清除干擾查詢DBCC DROPCLEANBUFFERSDBCC FREEPROCCACHESET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();set nocount ondeclare @i int=1while @i<=10000beginINSERT INTO Customers (CustomerNumber, CustomerName,CustomerCity)SELECT REPLACE(STR(@i, 4), ' ', '0'),'Customer ' + STR(@i,6),CHAR(65 + (@i % 26)) + '-City'set @[email protected]+1endselect [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO
Set NoCount On(http://msdn.microsoft.com/zh-cn/library/ms189837.aspx)的作用:使返回的結果中不包含有關受 Transact-SQL 語句影響的行數的資訊。這在批量插入時將顯著提高效能。至於 本例中,為什麼SQL Server 2008 R2版中卻不受該開關影響,希望知道的同學不吝賜教,非常感謝。
改進解決方案二:使用 Set NoCount On+Transaction
TRUNCATE table CustomersGO----清除干擾查詢DBCC DROPCLEANBUFFERSDBCC FREEPROCCACHE SET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();set nocount ondeclare @i int=1BEGIN TRANSACTIONwhile @i<=10000beginINSERT INTO Customers (CustomerNumber, CustomerName,CustomerCity)SELECT REPLACE(STR(@i, 4), ' ', '0'),'Customer ' + STR(@i,6),CHAR(65 + (@i % 26)) + '-City'set @[email protected]+1endCOMMITselect [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO
解決方案三:使用遞迴CTE插入
TRUNCATE table CustomersGODBCC DROPCLEANBUFFERSDBCC FREEPROCCACHESET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();/*****運用CTE遞迴插入,速度較快,邀月注***********************/WITH Seq (num,CustomerNumber, CustomerName, CustomerCity) AS(SELECT 1,cast('0000'as CHAR(4)),cast('Customer 0' AS NVARCHAR(50)),cast('X-City' as NVARCHAR(20))UNION ALLSELECT num + 1,Cast(REPLACE(STR(num, 4), ' ', '0') AS CHAR(4)),cast('Customer ' + STR(num,6) AS NVARCHAR(50)),cast(CHAR(65 + (num % 26)) + '-City' AS NVARCHAR(20))FROM SeqWHERE num <= 10000)INSERT INTO Customers (CustomerNumber, CustomerName, CustomerCity)SELECT CustomerNumber, CustomerName, CustomerCityFROM SeqOPTION (MAXRECURSION 0)select [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO
小結:SQL Server 2012中批量插入資料時,請記得Set NoCount ON,並儘可能加上Transaction,當然,推薦使用CTE,這可能會帶來效能上的巨大提升。
邀月補充:
後來與微軟亞太工程師多次溝通,得出初步結論:
在不開啟“set nocount on”時,SSMS 2012與SSMS 2008r2版本的UI在執行效率上可能有極大差異,而與SQL Server引擎沒有明顯相關。邀月注:本文版權由邀月和CSDN共同所有,轉載請註明出處。
助人等於自助! [email protected]
給我老師的人工智慧教程打call!http://blog.csdn.net/jiangjunshow
你好! 這是你第一次使用 **Markdown編輯器** 所展示的歡迎頁。如果你想學習如何使用Markdown編輯器, 可以仔細閱讀這篇文章,瞭解一下Markdown的基本語法知識。新的改變
我們對Markdown編輯器進行了一些功能拓展與語法支援,除了標準的Markdown編輯器功能,我們增加了如下幾點新功能,幫助你用它寫部落格:
- 全新的介面設計 ,將會帶來全新的寫作體驗;
- 在創作中心設定你喜愛的程式碼高亮樣式,Markdown 將程式碼片顯示選擇的高亮樣式 進行展示;
- 增加了 圖片拖拽 功能,你可以將本地的圖片直接拖拽到編輯區域直接展示;
- 全新的 KaTeX數學公式 語法;
- 增加了支援甘特圖的mermaid語法1 功能;
- 增加了 多螢幕編輯 Markdown文章功能;
- 增加了 焦點寫作模式、預覽模式、簡潔寫作模式、左右區域同步滾輪設定 等功能,功能按鈕位於編輯區域與預覽區域中間;
- 增加了 檢查列表 功能。
功能快捷鍵
撤銷:Ctrl/Command + Z
重做:Ctrl/Command + Y
加粗:Ctrl/Command + B
斜體:Ctrl/Command + I
標題:Ctrl/Command + Shift + H
無序列表:Ctrl/Command + Shift + U
有序列表:Ctrl/Command + Shift + O
檢查列表:Ctrl/Command + Shift + C
插入程式碼:Ctrl/Command + Shift + K
插入連結:Ctrl/Command + Shift + L
插入圖片:Ctrl/Command + Shift + G
合理的建立標題,有助於目錄的生成
直接輸入1次#,並按下space後,將生成1級標題。
輸入2次#,並按下space後,將生成2級標題。
以此類推,我們支援6級標題。有助於使用TOC
語法後生成一個完美的目錄。
如何改變文字的樣式
強調文字 強調文字
加粗文字 加粗文字
標記文字
刪除文字
引用文字
H2O is是液體。
210 運算結果是 1024.
插入連結與圖片
連結: link.
圖片:
帶尺寸的圖片:
當然,我們為了讓使用者更加便捷,我們增加了圖片拖拽功能。
如何插入一段漂亮的程式碼片
去部落格設定頁面,選擇一款你喜歡的程式碼片高亮樣式,下面展示同樣高亮的 程式碼片
.
// An highlighted block var foo = 'bar';
生成一個適合你的列表
- 專案
- 專案
- 專案
- 專案
- 專案1
- 專案2
- 專案3
- 計劃任務
- 完成任務
建立一個表格
一個簡單的表格是這麼建立的:
專案 | Value |
---|---|
電腦 | $1600 |
手機 | $12 |
導管 | $1 |
設定內容居中、居左、居右
使用:---------:
居中
使用:----------
居左
使用----------:
居右
第一列 | 第二列 | 第三列 |
---|---|---|
第一列文字居中 | 第二列文字居右 | 第三列文字居左 |
SmartyPants
SmartyPants將ASCII標點字元轉換為“智慧”印刷標點HTML實體。例如:
TYPE | ASCII | HTML |
---|---|---|
Single backticks | 'Isn't this fun?' |
‘Isn’t this fun?’ |
Quotes | "Isn't this fun?" |
“Isn’t this fun?” |
Dashes | -- is en-dash, --- is em-dash |
– is en-dash, — is em-dash |
建立一個自定義列表
- Markdown
- Text-to- HTML conversion tool
- Authors
- John
- Luke
如何建立一個註腳
一個具有註腳的文字。2
註釋也是必不可少的
Markdown將文字轉換為 HTML。
KaTeX數學公式
您可以使用渲染LaTeX數學表示式 KaTeX:
Gamma公式展示 是通過尤拉積分
你可以找到更多關於的資訊 LaTeX 數學表示式here.
新的甘特圖功能,豐富你的文章
gantt
dateFormat YYYY-MM-DD
title Adding GANTT diagram functionality to mermaid
section 現有任務
已完成 :done, des1, 2014-01-06,2014-01-08
進行中 :active, des2, 2014-01-09, 3d
計劃一 : des3, after des2, 5d
計劃二 : des4, after des3, 5d
- 關於 甘特圖 語法,參考 這兒,
UML 圖表
可以使用UML圖表進行渲染。 Mermaid. 例如下面產生的一個序列圖::
這將產生一個流程圖。:
- 關於 Mermaid 語法,參考 這兒,
FLowchart流程圖
我們依舊會支援flowchart的流程圖:
- 關於 Flowchart流程圖 語法,參考 這兒.
匯出與匯入
匯出
如果你想嘗試使用此編輯器, 你可以在此篇文章任意編輯。當你完成了一篇文章的寫作, 在上方工具欄找到 文章匯出 ,生成一個.md檔案或者.html檔案進行本地儲存。
匯入
如果你想載入一篇你寫過的.md檔案或者.html檔案,在上方工具欄可以選擇匯入功能進行對應副檔名的檔案匯入,
繼續你的創作。
註腳的解釋 ↩︎