1. 程式人生 > >SQL Server 2012中快速插入批量資料的示例及疑惑

SQL Server 2012中快速插入批量資料的示例及疑惑

分享一下我老師大神的人工智慧教程!零基礎,通俗易懂!http://blog.csdn.net/jiangjunshow

也歡迎大家轉載本篇文章。分享知識,造福人民,實現我們中華民族偉大復興!

               

SQL Server 2008中SQL應用系列--目錄索引

今天在做一個案例演示時,在SQL Server 2012中使用Insert語句插入1萬條資料,結果遇到了一個奇怪的現象,現將過程分享出來,以供有興趣的同學參考。


附:我的測試環境為:
SQL Server 2012,命名例項

Microsoft SQL Server 2012 - 11.0.2100.60 (Intel X86)
Feb 10 2012 19:13:17
Copyright (c) Microsoft Corporation
Enterprise Edition on Windows NT 6.0 <X86> (Build 6002: Service Pack 2)


建立示例資料庫

IF OBJECT_ID('DemoPager2012') IS NOT NULLDROP DataBase DemoPager2012GOCREATE
Database DemoPager2012GOUSE DemoPager2012GO
示例表,該表只有四個欄位。

/*Setup script to create the sample table and fill it withsample data.*/IF OBJECT_ID('Customers','U') IS NOT NULLDROP TABLE CustomersCREATE TABLE Customers ( CustomerID INT primary key identity(1,1),CustomerNumber CHAR(4),CustomerName VARCHAR
(50),CustomerCity VARCHAR(20) )GO
現在展示批量插入10000條資料到該表中,語句如下:

TRUNCATE table CustomersGO----清除干擾查詢DBCC DROPCLEANBUFFERSDBCC FREEPROCCACHESET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();declare @i int=1while @i<=10000beginINSERT INTO Customers (CustomerNumber, CustomerName,CustomerCity)SELECT REPLACE(STR(@i, 4), ' ', '0'),'Customer ' + STR(@i,6),CHAR(65 + (@i % 26)) + '-City'set @[email protected]+1endselect [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO

該插入語句在SQL Server 2008 r2版本和SQL Server 2012版本中,測試結果如下:

邀月工作室

 

 

令我驚訝的是,SQL Server 2012居然耗時達到5分多鐘,而SQL Server 2008R2版,只需要大約6秒鐘。更令人費解的是:查詢的I/O統計和elapsed time,在這兩個版本中幾乎一樣。對此異象,我只能理解為每次Insert時的毫秒級精度可能不足以度量該次操作帶來的細小差距,然而累積起來就非常可觀了。

解決方案一:使用 Set NoCount On,效果立竿見影

TRUNCATE table CustomersGO----清除干擾查詢DBCC DROPCLEANBUFFERSDBCC FREEPROCCACHESET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();set nocount ondeclare @i int=1while @i<=10000beginINSERT INTO Customers (CustomerNumber, CustomerName,CustomerCity)SELECT REPLACE(STR(@i, 4), ' ', '0'),'Customer ' + STR(@i,6),CHAR(65 + (@i % 26)) + '-City'set @[email protected]+1endselect [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO

邀月工作室

Set NoCount On(http://msdn.microsoft.com/zh-cn/library/ms189837.aspx)的作用:使返回的結果中不包含有關受 Transact-SQL 語句影響的行數的資訊。這在批量插入時將顯著提高效能。至於 本例中,為什麼SQL Server 2008 R2版中卻不受該開關影響,希望知道的同學不吝賜教,非常感謝。

 

改進解決方案二:使用 Set NoCount On+Transaction

TRUNCATE table CustomersGO----清除干擾查詢DBCC DROPCLEANBUFFERSDBCC FREEPROCCACHE SET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();set nocount ondeclare @i int=1BEGIN TRANSACTIONwhile @i<=10000beginINSERT INTO Customers (CustomerNumber, CustomerName,CustomerCity)SELECT REPLACE(STR(@i, 4), ' ', '0'),'Customer ' + STR(@i,6),CHAR(65 + (@i % 26)) + '-City'set @[email protected]+1endCOMMITselect [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO

邀月工作室

解決方案三:使用遞迴CTE插入

TRUNCATE table CustomersGODBCC DROPCLEANBUFFERSDBCC FREEPROCCACHESET STATISTICS IO ON;SET STATISTICS TIME ON;GODECLARE @d DatetimeSET @d=getdate();/*****運用CTE遞迴插入,速度較快,邀月注***********************/WITH Seq (num,CustomerNumber, CustomerName, CustomerCity) AS(SELECT 1,cast('0000'as CHAR(4)),cast('Customer 0' AS NVARCHAR(50)),cast('X-City' as NVARCHAR(20))UNION ALLSELECT num + 1,Cast(REPLACE(STR(num, 4), ' ', '0') AS CHAR(4)),cast('Customer ' + STR(num,6) AS NVARCHAR(50)),cast(CHAR(65 + (num % 26)) + '-City' AS NVARCHAR(20))FROM SeqWHERE num <= 10000)INSERT INTO Customers (CustomerNumber, CustomerName, CustomerCity)SELECT CustomerNumber, CustomerName, CustomerCityFROM SeqOPTION (MAXRECURSION 0)select [語句執行花費時間(毫秒)]=datediff(ms,@d,getdate())SET STATISTICS IO OFF ;SET STATISTICS TIME OFF;GO

邀月工作室

 

小結:SQL Server 2012中批量插入資料時,請記得Set NoCount ON,並儘可能加上Transaction,當然,推薦使用CTE,這可能會帶來效能上的巨大提升。

 

邀月補充:

後來與微軟亞太工程師多次溝通,得出初步結論:

在不開啟“set nocount on”時,SSMS 2012與SSMS 2008r2版本的UI在執行效率上可能有極大差異,而與SQL Server引擎沒有明顯相關。

邀月注:本文版權由邀月和CSDN共同所有,轉載請註明出處。
助人等於自助!   [email protected]




           

給我老師的人工智慧教程打call!http://blog.csdn.net/jiangjunshow

這裡寫圖片描述 你好! 這是你第一次使用 **Markdown編輯器** 所展示的歡迎頁。如果你想學習如何使用Markdown編輯器, 可以仔細閱讀這篇文章,瞭解一下Markdown的基本語法知識。

新的改變

我們對Markdown編輯器進行了一些功能拓展與語法支援,除了標準的Markdown編輯器功能,我們增加了如下幾點新功能,幫助你用它寫部落格:

  1. 全新的介面設計 ,將會帶來全新的寫作體驗;
  2. 在創作中心設定你喜愛的程式碼高亮樣式,Markdown 將程式碼片顯示選擇的高亮樣式 進行展示;
  3. 增加了 圖片拖拽 功能,你可以將本地的圖片直接拖拽到編輯區域直接展示;
  4. 全新的 KaTeX數學公式 語法;
  5. 增加了支援甘特圖的mermaid語法1 功能;
  6. 增加了 多螢幕編輯 Markdown文章功能;
  7. 增加了 焦點寫作模式、預覽模式、簡潔寫作模式、左右區域同步滾輪設定 等功能,功能按鈕位於編輯區域與預覽區域中間;
  8. 增加了 檢查列表 功能。

功能快捷鍵

撤銷:Ctrl/Command + Z
重做:Ctrl/Command + Y
加粗:Ctrl/Command + B
斜體:Ctrl/Command + I
標題:Ctrl/Command + Shift + H
無序列表:Ctrl/Command + Shift + U
有序列表:Ctrl/Command + Shift + O
檢查列表:Ctrl/Command + Shift + C
插入程式碼:Ctrl/Command + Shift + K
插入連結:Ctrl/Command + Shift + L
插入圖片:Ctrl/Command + Shift + G

合理的建立標題,有助於目錄的生成

直接輸入1次#,並按下space後,將生成1級標題。
輸入2次#,並按下space後,將生成2級標題。
以此類推,我們支援6級標題。有助於使用TOC語法後生成一個完美的目錄。

如何改變文字的樣式

強調文字 強調文字

加粗文字 加粗文字

標記文字

刪除文字

引用文字

H2O is是液體。

210 運算結果是 1024.

插入連結與圖片

連結: link.

圖片: Alt

帶尺寸的圖片: Alt

當然,我們為了讓使用者更加便捷,我們增加了圖片拖拽功能。

如何插入一段漂亮的程式碼片

部落格設定頁面,選擇一款你喜歡的程式碼片高亮樣式,下面展示同樣高亮的 程式碼片.

// An highlighted block var foo = 'bar'; 

生成一個適合你的列表

  • 專案
    • 專案
      • 專案
  1. 專案1
  2. 專案2
  3. 專案3
  • 計劃任務
  • 完成任務

建立一個表格

一個簡單的表格是這麼建立的:

專案 Value
電腦 $1600
手機 $12
導管 $1

設定內容居中、居左、居右

使用:---------:居中
使用:----------居左
使用----------:居右

第一列 第二列 第三列
第一列文字居中 第二列文字居右 第三列文字居左

SmartyPants

SmartyPants將ASCII標點字元轉換為“智慧”印刷標點HTML實體。例如:

TYPE ASCII HTML
Single backticks 'Isn't this fun?' ‘Isn’t this fun?’
Quotes "Isn't this fun?" “Isn’t this fun?”
Dashes -- is en-dash, --- is em-dash – is en-dash, — is em-dash

建立一個自定義列表

Markdown
Text-to- HTML conversion tool
Authors
John
Luke

如何建立一個註腳

一個具有註腳的文字。2

註釋也是必不可少的

Markdown將文字轉換為 HTML

KaTeX數學公式

您可以使用渲染LaTeX數學表示式 KaTeX:

Gamma公式展示 Γ ( n ) = ( n 1 ) ! n N \Gamma(n) = (n-1)!\quad\forall n\in\mathbb N 是通過尤拉積分

Γ ( z ) = 0 t z 1 e t d t &ThinSpace; . \Gamma(z) = \int_0^\infty t^{z-1}e^{-t}dt\,.

你可以找到更多關於的資訊 LaTeX 數學表示式here.

新的甘特圖功能,豐富你的文章

gantt
        dateFormat  YYYY-MM-DD
        title Adding GANTT diagram functionality to mermaid
        section 現有任務
        已完成               :done,    des1, 2014-01-06,2014-01-08
        進行中               :active,  des2, 2014-01-09, 3d
        計劃一               :         des3, after des2, 5d
        計劃二               :         des4, after des3, 5d
  • 關於 甘特圖 語法,參考 這兒,

UML 圖表

可以使用UML圖表進行渲染。 Mermaid. 例如下面產生的一個序列圖::

這將產生一個流程圖。:

  • 關於 Mermaid 語法,參考 這兒,

FLowchart流程圖

我們依舊會支援flowchart的流程圖:

  • 關於 Flowchart流程圖 語法,參考 這兒.

匯出與匯入

匯出

如果你想嘗試使用此編輯器, 你可以在此篇文章任意編輯。當你完成了一篇文章的寫作, 在上方工具欄找到 文章匯出 ,生成一個.md檔案或者.html檔案進行本地儲存。

匯入

如果你想載入一篇你寫過的.md檔案或者.html檔案,在上方工具欄可以選擇匯入功能進行對應副檔名的檔案匯入,
繼續你的創作。


  1. mermaid語法說明 ↩︎

  2. 註腳的解釋 ↩︎