1. 程式人生 > >SQLServer中使用擴展事件獲取Session級別的等待信息以及SQLServer 2016中Session級別等待信息的增強

SQLServer中使用擴展事件獲取Session級別的等待信息以及SQLServer 2016中Session級別等待信息的增強

cut 數據庫服務 事件 網絡 再次 drop nal exist 歷史

本文出處:http://www.cnblogs.com/wy123/p/6835939.html

什麽是等待

簡單說明一下什麽是等待:
當應用程序對SQL Server發起一個Session請求的時候,這個Session請求在數據庫中執行的過程中會申請其所需要的資源,
比如可能會申請內存資源,表上的鎖資源,物理IO資源,網絡資源等等,
如果當前Session運行過程中需要申請的某些資源無法立即得到滿足,就會產生等待。
SQL Server會以不用的方式來展現這個等待信息,比活動Session的等待信息,實例級的等待信息等等。
SQL Server中,等待事件是作為DBA進行TroubleShooting的重要參考信息之一,SQL Server中可以通過多中方式來獲取等待信息。

但是對於SQL Server 2016之前的版本來說,不管是活動Session級別的等待和實例級的等待,參考意義都有限,
更多的時候是想要更加詳細的且可以事後分析的等待,這就需要收集那些曾經已執行過的Session產生的等待信息,也就是特定Session等待信息的歷史記錄
本文重點介紹使用擴展事件來捕獲等待信息,但不介紹擴展事件本身的使用,重點放在如何使用擴展事件來獲取想要的等待事件信息。
需要對擴展事件有一定的了解。

等待信息的獲取途徑

在SQL Server中有一個系統視圖sys.dm_os_wait_stats記錄了自數據庫服務啟動以來累積產生的等待信息,
如下圖,這個結果是實例級的,也就是記錄的整個數據庫服務器所有的等待事件的累積。

多數時候參考意義不是很大,比如某一天的網絡延時很高,sys.dm_os_wait_stats中累計記錄了大量的ASYNC_NETWORK_IO等待信息。
但是到了第二天或者什麽時候,網絡變好了,但是sys.dm_os_wait_stats中記錄的ASYNC_NETWORK_IO等待信息是不變的
也就是說sys.dm_os_wait_stats無法反映實時等待情況。

技術分享

當然要獲取實時的等待信息也簡單,記錄兩個時間點之間sys.dm_os_wait_stats中等待時間的差值,可以間接地反映出來某一段時間的數據的等待信息。
但是這個信息仍然比較粗略,依舊是實例級的,某些時候依舊是不足夠作為參考的。

另外一個是通過sys.dm_exec_requests這個系統視圖的wait_type,wait_time等獲取活動Session的等待信息
如截圖,但是這個是活動Session的信息,當Session完成之後,它的等待信息就看不到曾經都產生了那些等待,分別是多久。
也就說,你無法追溯歷史上某一個Session或者某一個SQL(存儲過程)執行過程中的都產生了什麽類型的等待,等待了多長時間。

技術分享

實話說,不管是sys.dm_os_wait_stats還是sys.dm_exec_requests,在正常情況下,獲取到的等待信息實用價值都是不高或者是適用場景有限。

更多的時候我們是想要更細一級的等待,比如某一個Login、某一部分Session、甚至某些特定的SQL(存儲過程)的執行過程中產生的等待信息。
舉個實際例子,數據庫又10個Login給10個不同的應用程序訪問,其中只有1個應用程序端反饋說訪問數據庫慢,或者有性能問題,其他Login都反饋正常
那麽很有可能是這個Login請求自己的問題,此時就需要針對這一個Login的情況進行針對性分析,而不是在實例級分析診斷。
如果能夠拿到這個Login執行的Session的等待情況,或者這個Login某些特定的數據庫對象的執行過程中的等待信息,對定位問題的針對性的就比較強了。

本文就以此為切入點,針對如何獲取Session級別的等待信息展開說明和演示。

SQL Server 2016中獲取Session級別的等待信息

在SQL Server 2016中,獲取Session級別的等待信息是比較方便的,有直接的系統視圖sys.dm_exec_session_wait_stats可以使用
當前情況下,想要知道某一個Session的等待信息就很簡單了,
在sql語句開始的時候把當前Session的等待信息記錄下來
在sql語句結束的時候把當前Session的等待信息再次記錄出來
計算兩次等待信息的差值,就可以知道當前Session運行的過程中有哪些等待,分別是多少。

技術分享

  sqlserver開發團隊可能也意識到了對於等待信息,更多的時候,需要的是較為具體的等待,而不是一個籠統的實例級的等待
  因此在SQL Server 2016中增加了sys.dm_exec_session_wait_stats這個支持統計Session級別的等待的視圖
  很不幸的SQL Server2016之前的版本中是沒有這個系統視圖可以很方便地記錄Session級別的等待。
  但是可以借助擴展事件來實現類似的功能。

使用擴展事件來捕獲Session級別的等待信息

因為這裏是是用擴展事件來實現的,這裏要求讀者要對擴展事件有一個基本的認識,擴展事件本身就不多說了。
上代碼,啟動一個擴展事件,來記錄執行時間超過三秒的SQL語句,其執行過程中等待時間大於0的等待事件信息。
當然這個捕獲的信息可以加上各種過濾條件。具體參考代碼備註。

IF EXISTS(SELECT * FROM sys.server_event_sessions WHERE name=CollectionSessionWaitStats)
  DROP EVENT session CollectionSessionWaitStats ON SERVER;
GO

--  創建事件會話  
CREATE EVENT SESSION CollectionSessionWaitStats ON SERVER   
ADD EVENT sqlserver.rpc_completed
(  
    ACTION
    (
        sqlos.task_time,
        sqlserver.database_name,
        sqlserver.nt_username,
        sqlserver.username,
        sqlserver.sql_text,
        sqlserver.session_id,
        sqlserver.transaction_id
    )  WHERE [duration]>=3000000
),  
ADD EVENT sqlserver.sql_batch_completed
(  
    ACTION
    (
        sqlos.task_time,
        sqlserver.database_name,
        sqlserver.nt_username,
        sqlserver.username,
        sqlserver.sql_text,
        sqlserver.session_id,
        sqlserver.transaction_id
    ) WHERE [duration]>=3000000
),
ADD EVENT sqlos.wait_info
(
    ACTION 
    (
        sqlos.task_time,
        sqlserver.database_name,
        sqlserver.nt_username,
        sqlserver.sql_text,
        sqlserver.username,
        sqlserver.session_id,
        sqlserver.transaction_id
    ) WHERE  session_id>50 
            and opcode=1 
            and duration>0
            and sql_text not like %sp_MScdc_capture_job%‘ --排除某些信息
            --and username = ‘‘ --限定只記錄某些信息
),
ADD EVENT sqlos.wait_info_external
(
    ACTION
    (
        sqlos.task_time,
        sqlserver.database_name,
        sqlserver.nt_username,
        sqlserver.username,
        sqlserver.sql_text,
        sqlserver.session_id,
        sqlserver.transaction_id
    ) WHERE   session_id>50 
            and opcode=1 
            and duration>0
            and sql_text not like %sp_MScdc_capture_job%
            --and username = ‘‘
)
ADD TARGET package0.event_file
(  
    SET filename=ND:\XEventFiles\CollectionSessionWaitStats,
    max_file_size=(1024),   
    max_rollover_files=(10) 
)
WITH ( 
        MAX_MEMORY=4096 KB,            
        EVENT_RETENTION_MODE=ALLOW_SINGLE_EVENT_LOSS,
        MAX_DISPATCH_LATENCY=30 SECONDS,
        MAX_EVENT_SIZE=0 KB,            
        MEMORY_PARTITION_MODE=NONE,     
        TRACK_CAUSALITY=OFF,            
        STARTUP_STATE=ON
    )
GO

--  啟用(停止)事件會話(START / STOP)  
ALTER EVENT SESSION CollectionSessionWaitStats ON SERVER STATE=START  
GO

是用擴展事件收集的Session級別的等待信息有以下幾個特點
1,SessionId是可以重復的
  舉例說明就是:比如一個SessionId = 80的Session,可以第一次執行一個SQLA,第二次執行一個SQLB.
  同時這兩個SQL的執行與其執行過程中產生的等待信息都可以被捕獲出來
2,同一個時間段內,一個同一個SessionId不可能同時執行,
  比如16:46:36秒到16:46:46秒到這個時間內,SessionId = 80的Session正在執行,擴展事件捕獲到了其產生的等待信息
  但是在16:46:36秒到16:46:46這個時間段內,不可能有另外一個SessionId = 80也在執行,這個邏輯不難理解
為什麽要特意說明這個問題?
因為擴展事件收集到的事件信息中SQL語句完成事件(rpc_completed或者sql_batch_completed)與產生的等待之間,沒有一個直接的對應關系。

怎麽理解?動起手來才能發現問題,我是這個糾結了大半天,截圖示例。

如下截圖,擴展事件捕獲到的兩個目標事件的SessionId都是58,但是執行的SQL是不一樣的,

技術分享

如下截圖是不區分事件類型,捕獲到的所有的事件信息。

技術分享

也就是上面說的,對於58號Session:
第一次運行了SELECT COUNT(1) FROM TestCollectionSessionWaitStats
第二次運行了SELECT COUNT(1) FROM TestCollectionSessionWaitStats WHERE Id>10
兩次運行的SQL一致或者不一致問題不大,關鍵是捕獲到的等待事件信心的SessionId也是58,怎麽區分產生的事件是歸屬於哪一次的運行?
比如58號Session運行兩次sql,產生了10條等待信息,怎麽區分這10條等待信息哪些歸屬於第一次運行生成的,哪些歸屬於第二次運行生成的?
這個就依靠上面說的第二點“同一個時間段內,一個同一個SessionId不可能同時執行”
對於同一個SessionId,在sql_batch_completed事件中,從時間的維度來看
小於第一次sql_batch_completed事件完成時間的必然是58號Session第一次執行生成的
大於第一次sql_batch_completed事件完成事件的且小於第二次sql_batch_completed的必然是58號Session第二次執行生成的
有了這個理論基礎,我們統計Session級別的等待就比較容易了,相信這個邏輯的實現並不難。

如下圖是58號Session執行某SQL語句產生的等待詳細信息,可以看到多次產生了CXPACKET和 PAGEIOLATCH_SH等待
鑒於截圖問題,下面還有另外一個同樣是58號Session的執行另外一個SQL捕獲到的等待信息
這個統計辦法就是上面提到的,在兩次sql_batch_completed事件中,雖然等待事件的SessionId一樣,
但是其發生的時候是處於當前事件的sql_batch_completed之前,上一次sql_batch_completed之後,
這樣就可以完美地匹配到sql_batch_completed事件與其對應的wait_info事件。
在這種情況下,統計得到類似於SQL Server 2016中的sys.dm_os_wait_stats的結果也就不難了。

  技術分享

與sys.dm_os_wait_stats 等待信息的結果相比,上述通過擴展事件獲取的等待信息,是不是更加詳細和具體?
比如對於CXPACKET等待時間,
不難發現,如果計算計算其產生的次數(count),就類似於sys.dm_os_wait_stats 中的waiting_tasks_count,計算其產生的總時間(sum),就類似於wait_time_ms
但是上述時間的信息已經細化到Session級別了,比sys.dm_os_wait_stats 中的等待信息更有參考價值。
對於問題的診斷和分析,也會是更加有效。

技術分享

上述統計結果的SQL語句

-- Parse the XML to show rpc_completed,sql_batch_completed details
if object_id(tempdb..#t1) is not null
    drop table #t1
SELECT 
    event_xml.value((./action[@name="session_id"]/value)[1], INT) as session_id,
    event_xml.value((.[email protected]), varchar(1000)) as timestamp,
    event_xml.value((./data[@name="statement"]/value)[1], varchar(max)) as statement,
    event_xml.value((./data[@name="batch_text"]/value)[1], varchar(max)) as batch_text,
    event_xml.value((.[email protected]), varchar(1000)) as Event_Name,
    event_xml.value((./data[@name="duration"]/value)[1], bigint) as Duration,
    event_xml.value((./data[@name="cpu_time"]/value)[1], bigint) as cpu_time,
    event_xml.value((./data[@name="physical_reads"]/value)[1], bigint) as physical_reads,
    event_xml.value((./data[@name="logical_reads"]/value)[1], bigint) as logical_reads,
    event_xml.value((./action[@name="username"]/value)[1], varchar(max)) as username
INTO #t1
FROM (
        SELECT CAST(event_data AS XML) xml_event_data 
        FROM sys.fn_xe_file_target_read_file(ND:\XEventFiles\CollectionSessionWaitStats*, NULL, NULL, NULL)

     ) AS event_table
CROSS APPLY xml_event_data.nodes(//event) n (event_xml)
WHERE event_xml.value((.[email protected]), varchar(1000))  in (rpc_completed,sql_batch_completed)
order by Event_Name



-- Parse the XML to show wait_info,wait_info_external details
if object_id(tempdb..#t2) is not null
    drop table #t2
SELECT 
    cast(event_xml.value((.[email protected]), varchar(1000)) as DATETIME2) as timestamp,
    event_xml.value((./data[@name="duration"]/value)[1], bigint) as duration,
    event_xml.value((./action[@name="session_id"]/value)[1], INT) as session_id,
    event_xml.value((./data[@name="wait_type"]/text)[1], VARCHAR(200)) as wait_type
INTO #t2
FROM (
        SELECT CAST(event_data AS XML) xml_event_data 
        FROM sys.fn_xe_file_target_read_file(ND:\XEventFiles\CollectionSessionWaitStats*, NULL, NULL, NULL)
     ) AS event_table
     CROSS APPLY xml_event_data.nodes(//event) n (event_xml)
WHERE event_xml.value((.[email protected]), varchar(1000))  in (wait_info,wait_info_external)



if object_id(tempdb..#t3) is not null
    drop table #t3

SELECT 
    a.session_id                    AS SessionId,
    isnull(statement,batch_text)    AS SQLTEXT,
    a.Duration                        AS TotalExecuteTime,
    CAST(a.timestamp AS DATETIME2)    AS CompletedTime,
    CAST(b.timestamp AS DATETIME2)    AS WaitTypeStartTime,
    b.wait_type                        AS WaitType,
    b.duration                        AS WaitDuration
INTO #t3
FROM #t1 a INNER JOIN #t2 b on a.session_id = b.session_id
    and b.timestamp < a.timestamp 
    and b.timestamp>(
                         select top 1 timestamp from #t1 c 
                         where a.session_id = a.session_id and a.timestamp > b.timestamp
                         order by a.timestamp
                    )

select 
    case when rn = 1 then SessionId else NULL end as SessionId,
    case when rn = 1 then SQLTEXT else NULL end as SQLTEXT,
    case when rn = 1 then TotalExecuteTime else NULL end as TotalExecuteTime,
    CompletedTime as CompletedTime,
    WaitType,
    WaitTypeStartTime as WaitTypeStartTime,
    WaitDuration
from 
(
    select ROW_NUMBER()over(partition by SessionId,SQLTEXT,TotalExecuteTime,CompletedTime order by CompletedTime,WaitTypeStartTime) as rn,
    * FROM #t3
)t 

當然該語句僅供參考,目的是為了收集Session級的統計信息,當收集到Session級別的統計信息之後,具體的統計方式也不難。

  

總結
   等待事件可以幫助我們診斷SQL Server上的一些資源瓶頸,對於問題的處理和解決有著比較重要的參考意義,如果能夠細化地收集等待事件,對於解決問題的參考意義會更大。
   本文通過一個簡單的示例,使用擴展事件來收集SQL Server中一些特定場景下的等待信息,來更加有針對性地進行問題的診斷和識別,使得問題的分析更加高效和具有針對性。

  

SQLServer中使用擴展事件獲取Session級別的等待信息以及SQLServer 2016中Session級別等待信息的增強