当前位置: 澳门新濠3559 > 数据库 > 正文

这个UI提供了创建和管理会话功能,-1))将死锁写

时间:2019-10-07 08:55来源:数据库
SQL Server 扩展事件(ExtendedEvent)是用于服务器的常规事件处理系统,是追踪SQLServer系统运行状态的神器,同时也是一个日志记录工具,扩展事件完全可以取代SQL追踪(SQLTrace),扩展事

SQL Server 扩展事件(Extended Event)是用于服务器的常规事件处理系统,是追踪SQL Server系统运行状态的神器,同时也是一个日志记录工具,扩展事件完全可以取代SQL追踪(SQL Trace),扩展事件的设计功能:

 

开始采用Extended Events 最大的阻碍之一是需要使用Xquery和XML知识用来分析数据。创建和运行会话可以用T-SQL完成,但是无论使用什么目标,数据都会被转换为XML。这个限制在SQL Server 2012中已经被移除,它已经实现了Extended Events 用户界面。在SQL Server 2014中也基本没有变化,如我们在进阶2中所见,这个UI提供了创建和管理会话功能。在本阶中,我们将探索捕获数据的查看和处理的功能。

  • 由于扩展事件引擎不识别事件,因此,引擎可以将任何事件绑定到任何目标,因为引擎不受事件内容约束。
  • 事件与事件使用者不同,后者在扩展事件中称为“目标”(Target),也就是说任何目标可以接收任何事件。此外,引发的任何事件均可供目标自动使用,这样可以记录或提供额外的事件上下文。
  • 事件不同于在事件激发时要执行的操作。因此,任何操作可以与任何事件相关联。
  • 谓词可以动态筛选事件的激发,从而增强了扩展事件基础结构的灵活性。

事情起因:
  排查SQL Server上的死锁问题,一开始想到的就是扩展事件,
  第一种方案,开profile守株待兔吧,显得太low了,至于profile的变种trace吧,垂垂老矣,也一直没怎么用过。
  第二种方案是开启TRACE flag(DBCC TRACEON (3605,1204,1222,-1))将死锁写入error log,也是个不错的选择。
  不过想到系统默认的扩展事件system_health已经捕获了死锁信息(sqlserver.xml_deadlock_report),
  就没必要再重新往error log记一次了,理论上从system_health中就能拿到死锁信息,因此尝试从system_health的ring_buffer target获取死锁信息。

SQL server 2008 中引入了Extended Events 用以替换SQL Trace。 然而在第一个版本中并没有为用户提供UI,因此使用Extended Events并不是很方便。SQL Server 2012及时修正了这一点,将UI管理工具集成在SSMS中, 这就意味着我们不需要再为了查询Event XML而学习使用XQuery了。因此跟多的DBA和开发由SQL trace 和Profiler转向了Extended Events.

查看数据

当创建并启动会话后,我们有两种选择查看事件数据:实时数据查看器和目标数据查看器。
为了完成例子中的内容,你可以创建Listing 1中所示的XE_SampleCapture会话。它将捕捉batch,Statement和Procdeure 完成事件以及相关事件字段:
query_hash - 标识具有相似逻辑但是查询计划不同的查询
query_plan_hash 标识具有不同的查询计划但有相似逻辑树的查询计划

这两字段分别关于查询指纹和计划指纹。我们使用这些字段主要用于分析Ad-Hoc负载,查找非常相似但却有细微区别的查询,如具有不同的值(difference values of their concatenated literals)。

CREATE EVENT SESSION [XE_SampleCapture] ON SERVER
ADD EVENT sqlserver.rpc_completed (
    ACTION ( sqlserver.database_id, sqlserver.query_hash,
    sqlserver.query_plan_hash )
    WHERE ( [sqlserver].[is_system] = ( 0 ) ) ),
ADD EVENT sqlserver.sp_statement_completed ( SET collect_statement = ( 1 )
    ACTION ( sqlserver.database_id, sqlserver.query_hash,
    sqlserver.query_plan_hash )
    WHERE ( [sqlserver].[is_system] = ( 0 ) ) ),
ADD EVENT sqlserver.sql_batch_completed (
    ACTION ( sqlserver.database_id, sqlserver.query_hash,
    sqlserver.query_plan_hash )
    WHERE ( [sqlserver].[is_system] = ( 0 ) ) ),
ADD EVENT sqlserver.sql_statement_completed (
    ACTION ( sqlserver.database_id, sqlserver.query_hash,
    sqlserver.query_plan_hash )
    WHERE ( [sqlserver].[is_system] = ( 0 ) ) )
ADD TARGET package0.event_counter,
ADD TARGET package0.event_file ( SET filename = N'C:tempXE_SampleCapture' ,
                                  max_file_size = ( 512 ) ),
ADD TARGET package0.histogram ( SET filtering_event_name = N'sqlserver.sql_statement_completed' ,
                                 slots = ( 16 ) ,
                                 source = N'sqlserver.database_id' ),
ADD TARGET package0.ring_buffer ( SET max_events_limit = ( 10000 ) ,
                                   max_memory = ( 4096 ) )
WITH ( MAX_MEMORY = 16384 KB ,
        EVENT_RETENTION_MODE = ALLOW_SINGLE_EVENT_LOSS ,
        MAX_DISPATCH_LATENCY = 30 SECONDS ,
        MAX_EVENT_SIZE = 0 KB ,
        MEMORY_PARTITION_MODE = NONE ,
        TRACK_CAUSALITY = ON ,
        STARTUP_STATE = OFF );
GO

为了生成一些样本数据,我执行了Jonathan Kehayias 为 AdventureWorks创建的随机负载生成脚本(

扩展事件可以同步生成事件数据(并异步处理该数据),这为事件处理提供了灵活的解决方案。此外,扩展事件提供以下功能:

排查经过:
  从sysem_health的ring_buffer中目标中,并没有捕获到预期的曾经发生的死锁事件信息,
  在完全确认发生过死锁的情况下(并且是最近,或者是刚刚),为什么sysem_health“没有能够捕获到”?
  无奈之下单独开了一个捕获死锁事件的扩展事件Session(仅捕获sqlserver.xml_deadlock_report),target目标是存储在ring_buffer中
  在人为刻意地制造一个死锁之后,来检验sysem_health和自定义的捕获扩展事件捕获的死锁信息
  此时意想不到的情况发生了,自定义的扩展事件完整地捕获到了这个死锁信息,而system_health仍旧没有捕获到对应的死锁信息。
  什么情况?

这个系列教程中,我们将详细的介绍如何使用Extended Events作为诊断数据收集工具,用来跟踪SQL Server的性能问题。第一节中我们将从一个DBA都锁熟悉的问题开始: 使用SQL trace 跟踪调查 long-rannning 查询。 从基础开始,我会介绍如何使用Extended Events 完成同样的任务。

实时数据查看器

Live Data Viewer总是可用的,无论会话设置了什么类型的目标,甚至是没有设置目标,它会简单的显示出捕获的数据。打开查看器仅需右键选择任何运行中的会话并选择"Watch Live Data"。你可以使用上面创建的XE_SampleCapture会话,如果喜欢也可以使用system_health会话。图1显示了一些数据样例。

澳门新濠3559 1

Figure 1

初始化后可能不会显示任何数据,尤其是你尝试打开system_health 会话时,因为事件显示在查看器中的速度主要取决于你收集的事件和谓词。如果你有一个可以快速捕捉数据的会话,那么一旦事件会话的调度周期到达,或者缓冲区被填充,事件会被调度到查看器和会话中定义的其他目标。

调度周期和内存缓冲
Extended Events引擎首先将事件数据流写入指定会话的中间缓冲区。调度周期是一个会话级别的选项,用于定义将事件数据从内存写入目标的频率,以秒为单位。

除非你导出数据,否则实时查看器中的数据并不会被持久化。你必须停止实时查看器的数据推送后才能使用这个选项(通过 Extended Events主菜单中的Stop Data Feed)。选择实时数据查看器窗口,转到Extended Events | Export to来选择导出目标。

你可以随时停止数据推送或者关闭查看器,同时在前一阶中我们提到过,SQL Server如果检测对性能有负面影响时,查看器会自动停止。

  • 一种跨服务器系统处理事件的统一方法,同时使用户可以隔离特定的事件进行故障排除。
  • 基于 Transact-SQL 的完全可配置的事件处理机制。
  • 可以动态监视活动进程,同时对这些进程的影响最小。

   如下自定义扩展事件脚本

Extended Events不仅仅是一个用于替换SQL trace 和Profiler的工具。通过完整这个系列教程, 你会发现那些使用SQL trace 往往会消耗过高代价的诊断,在Extended Event 变的切实可行, 并且之前困难的,甚至不可能的跟踪任务不但变的可行,而且更加简单。

目标数据查看器

另外一个查看会话数据的方式是右键点击目标,然后然后选择View Target Data…选项。这个菜单根据选择的目标显示不同的视图

使用TSQL创建扩展事件的过程比较复杂,但是,我们可以使用另外一种简单的方法:使用扩展时间的创建向导。

CREATE EVENT SESSION [Deadlock_Monitor] ON SERVER
ADD EVENT sqlserver.xml_deadlock_report
ADD TARGET package0.ring_buffer(SET max_events_limit=(5000),max_memory=(4096))
WITH
(MAX_MEMORY=4096 KB,EVENT_RETENTION_MODE=ALLOW_SINGLE_EVENT_LOSS,MAX_DISPATCH_LATENCY=10 SECONDS,
MAX_EVENT_SIZE=0 KB,MEMORY_PARTITION_MODE=NONE,TRACK_CAUSALITY=OFF,STARTUP_STATE=ON)

ALTER EVENT SESSION [Deadlock_Monitor] ON SERVER STATE = start;

SQL Trace 和Profiler 将不再引入新功能。虽然他们为我们熟知,Profiler伴随SQL Server7.0在1998 发行, 现在是时候拥抱Extended Event理解他的功能。

查看 event_file目标数据

如果是选择了一个event_file 目标,则显示已经被写入硬盘的目标文件中的事件数据。这些信息不会更新,仅显示打开文件那一刻已经存在的数据。

澳门新濠3559 2

Figure 2

对于一个event_file目标,这个选项与实施数据查看器对比的好处是它不需要SQL Server同时将数据流写入目标和Management Studio。它仅仅读取已经被目标消费后的数据。

event_file 目标捕捉的数据可以在事件会话停止后在SQL Server Management Studio 中查看,因为他们会以.xel文件保存在硬盘上。你可以拖拽一个.xel文件到SSMS中,或者使用 File | Open | File…菜单选项打开一个.xel文件。system_health会话的默认文件路径在默认的错误日志文件夹中。

这个查看器看起来极为相似,除了windows窗口中的文件名不一样 (XE_SampleCapture_0_131061823727010000.xel), 实时查看器显示Live data和目标查看器显示event_file。

澳门新濠3559 3

Figure 3

一,创建扩展事件的会话

死锁捕获结果,sysem_health并没有捕获到预期的死锁事件,尽管他包括了sqlserver.xml_deadlock_report事件

什么是Extended Event

Extended Event 是一个事件收集基础设施,最早在 SQL Server 2008 中引入。我们可以使用Extended Event 收集分析SQL server 实例和数据库产生的不同种类型的诊断数据。Extended Event是SQLOS的一部分, 它由很多模块组成,并在SQL Server启动时被加载。它提供了大量的事件集用以替换,提升和扩展SQL Trace中的事件。

当微软决定使用Extened Events 替换SQL Trace时,他们从草图开始设计了一整套event收集架构。他的目标之一就是高度的可扩展性,可以根据需求添加新的event。与此同时微软为SQL Server引入一系列的Feature, 如Avaliability Groups, In-Memory OLTP和Columnstore indexes, 因此也同时为这些Feature添加了相应的Event,用以当使用这些Feature时收集诊断数据。对于SQL Server 2012及以上版本,采用Extended Event 至关重要,因为新Featrue加入的event只能在Extened Events中找到。

表一中罗列的各主要SQL Server 版本中可用的Extended Event事件数量。这些是全部的事件, 包括debug 事件, 同样这些版本中, SQL Trace 只有180个事件。 在SQL Server 2012中,SQL Trace的所有事件都有一个兼容的Extended Events事件,虽然他们并没有一一对应。
SQL Server Version Number of Events Notes
澳门新濠3559 4

另一个Extended Events设计的重要目标是尽量减小收集数据的影响,在调查问题时减小系统额外的开销。Extended event 使用了多种方式来达到这一目标, 我们接下来进一步讨论:

Event最小默认负载——默认情况下每个事件仅收集最少的事件数据列。如果我们希望进一步收集列,我们必须显示的添加“Actions”到事件中。SQL Trace的设计中默认会收集大量的负载数据,但是我们仅仅忽略了那些不需要的数据。
强大的过滤谓词——ExtendedEvents提供了非常细腻的过滤 通过谓词,我们可以只收集那些符合特定条件的事件。我们可以使用谓词来收集特定的事件,如每发生5次, 或者只收集某些特定的条件下的事件,如当一个的数据的值(如Duration)比以前的值大。Extended Event在事件触发的早期一旦默认负载数据收集完成就会被过滤,这样可以避免任何不必要的数据收集过程。
Advanced Tagets—— 与SQL Trance 相似,同时支持In-Memory(Ring_bufer)和文件系统(event_file)作为目标。 Extended events 提供了根据特定条件聚合数据选择目标。

这就意味着,即使我们设计了相对较发杂的事件会话,数据来自数据不同的事件,我们只要小心的设计谓词并选择那些我们需要收集的目标数据,我们可以很小的代价来观察服务器。
总之,大量的事件,结合高效的过滤以及多种选项,使得Extended Event成为一个远远超越Trace的事件收集器。

查看ring_buffer目标数据

当使用ring_buffer目标是,View Target Data选项不是非常有帮助,因为它以整个的XML链接格式显示。

澳门新濠3559 5

Figure 4

点击链接后,数据以xml格式显示,但是对于分析也不是很有帮助。

澳门新濠3559 6

Figure 5

当使用ring_buffer 目标是,我们需要使用XQuery分析事件数据。

step1,打开新建会话向导(New Session Wizard)

澳门新濠3559 7

从我们熟悉的开始: SQL Trace

从我的经验讲,学习新事物最容易的方式就是从我们已知的知识开始。下面对于 SQL Trace 和Profiler等这些你已熟知的知识介绍,将作为我们理解Extended Event工作方式的基础,且并理解它与SQL Trace 和Profiler的不同。

对于数据库专家,排查SQL查询性能问题是我们经常遇到的问题之一。以前,我们通常会创建一个Trace用于捕捉与我们存储过程或SQL执行相关的事件。我们通常会设置一些过滤条件,如超过一定数量的Reads,特定的执行时间或是消耗的CPU等。

通常打开Profiler来定义trace是一个方便快捷的方式。当我们新建一个trace,也可能是使用一些已有的模板,连接到SQL 实例,并选择需要的时间。在截图1中,我们仅选择了两个事件“RPC:Completed" 和"SQL:StmtCompleted”,并捕捉了相同的数据列。

澳门新濠3559 8

Figure 1: Selecting events and data columns for a trace

当使用Profiler或SQL Trace时,添加过滤过滤条件总是被推荐的。但是与Extended Event比,使用SQL Trace的问题之一就是晚期过滤。及时我们定义了过滤条件,SQL Trace or Profiler 任然会收集事件实例的全部数据,然后再过滤它。当然,过滤条件依然是非常重要的,它保证了我们的发送到客户端或者目标文件的事件是经过过滤的。
在这个例子中,我们添加一个过滤条件:Reads 大于等于10000,如图2

澳门新濠3559 9

Figure 2: Defining a trace filter on number of reads

当我们选择好事件和列,设置过滤,以及保存的Trace 文件后,我们就可以启动Trace了。经验丰富的DBA和开发都知道直接运行Profiler会带来严重的性能问题( ).因此为了最小化对生产环境的影响,最好的方法是点击开始后立即停止Trace,然后通过"File | Export | Script Trace Definition | For SQL Server 2005 – 2014"菜单导出脚本。 这样做之后Trace将在服务器端执行而不是在 Profiler的GUI上执行。 List 1 是导出的SQL脚本。

/****************************************************/
/* Created by: SQL Server 2014 Profiler          */
/* Date: 11/30/2015  08:50:44 AM         */
/****************************************************/

-- Create a Queue
DECLARE @rc INT
DECLARE @TraceID INT
DECLARE @maxfilesize BIGINT
SET @maxfilesize = 5 

-- Please replace the text InsertFileNameHere, with an appropriate
-- filename prefixed by a path, e.g., c:MyFolderMyTrace. The .trc extension
-- will be appended to the filename automatically. If you are writing from
-- remote server to local drive, please use UNC path and make sure server has
-- write access to your network share

EXEC @rc = sp_trace_create @TraceID OUTPUT, 0, N'InsertFileNameHere',
    @maxfilesize, NULL 
IF ( @rc != 0 )
    GOTO error

-- Client side File and Table cannot be scripted

-- Set the events
DECLARE @on BIT
SET @on = 1
EXEC sp_trace_setevent @TraceID, 10, 10, @on
EXEC sp_trace_setevent @TraceID, 10, 3, @on
EXEC sp_trace_setevent @TraceID, 10, 12, @on
EXEC sp_trace_setevent @TraceID, 10, 13, @on
EXEC sp_trace_setevent @TraceID, 10, 14, @on
EXEC sp_trace_setevent @TraceID, 10, 15, @on
EXEC sp_trace_setevent @TraceID, 10, 16, @on
EXEC sp_trace_setevent @TraceID, 10, 18, @on
EXEC sp_trace_setevent @TraceID, 10, 26, @on
EXEC sp_trace_setevent @TraceID, 41, 3, @on
EXEC sp_trace_setevent @TraceID, 41, 10, @on
EXEC sp_trace_setevent @TraceID, 41, 12, @on
EXEC sp_trace_setevent @TraceID, 41, 13, @on
EXEC sp_trace_setevent @TraceID, 41, 14, @on
EXEC sp_trace_setevent @TraceID, 41, 15, @on
EXEC sp_trace_setevent @TraceID, 41, 16, @on
EXEC sp_trace_setevent @TraceID, 41, 18, @on
EXEC sp_trace_setevent @TraceID, 41, 26, @on
EXEC sp_trace_setevent @TraceID, 41, 61, @on


-- Set the Filters
DECLARE @intfilter INT
DECLARE @bigintfilter BIGINT

EXEC sp_trace_setfilter @TraceID, 10, 0, 7,
    N'SQL Server Profiler - f45d52c9-c0eb-45da-8bae-dc6f1a945251'
SET @bigintfilter = 10000
EXEC sp_trace_setfilter @TraceID, 16, 0, 4, @bigintfilter

-- Set the trace status to start
EXEC sp_trace_setstatus @TraceID, 1

-- display trace id for future references
SELECT  TraceID = @TraceID
GOTO finish

error: 
SELECT  ErrorCode = @rc

finish: 
go

Listing 1: A server-side trace to capture poorly-performing queries

有些人以前逐句的阅读过以上SQL Trace 脚本,也可能只是对以上脚本的功能由一定了解。 但是为了确保我们在同一起跑线上,我们会快速的解释一下这段脚本。

开始的一段定义了一些用于创建Trace的存储过程sp_trace_create 所需要的变量。作为一个用户,我们首先定义了最大文件大小(这个例子中@maxfilesize设置的为5MB)。我们也可以指定是否。更多关于sp_trace_create细节请查看

输出文件路径也是sp_trace_create的一部分。在运行这个Trace钱,请使用一个合适的文件路径替换InsertFileNameHere,如“C:tempReadsFilter_Trace"。根据脚本的注释,我们不需要指定.trc后缀名。

-- Create a Queue
DECLARE @rc INT
DECLARE @TraceID INT
DECLARE @maxfilesize BIGINT
SET @maxfilesize = 5 

-- Please replace the text InsertFileNameHere, with an appropriate
-- filename prefixed by a path, e.g., c:MyFolderMyTrace. The .trc extension
-- will be appended to the filename automatically. If you are writing from
-- remote server to local drive, please use UNC path and make sure server has
-- write access to your network share

EXEC @rc = sp_trace_create @TraceID OUTPUT, 0, N'InsertFileNameHere',
    @maxfilesize, NULL 
IF ( @rc != 0 )
    GOTO error

Listing 2: The sp_trace_create portion of the server-side trace

根据以上定义,这个Trace会一直执行,直到我们手动停止它。或者,我们可以为sp_trace_create提供一个@datetime参数,这样我们就可以限定Trace的执行时间(例如我们可以设置执行一个小时set @DateTime = dateadd(hh, 1, getdate())。

Trace脚本的下一段设置了我们所需要的事件。存储过程sp_trace_setevent添加了我们需要捕获的事件和列。这些使用数据来标识的事件和列并不利于阅读。我们通常需要MSDN( 和SQL:StmtCompleted事件。接下来第二列定义了数据列。例如10表示ApplicationName,3表示DatabaseID等。为了更清晰的查看,我在源代码上添加了注释。

 

-- Set the events
declare @on bit
set @on = 1
exec sp_trace_setevent @TraceID, 10, 10, @on    --RPC:Completed, AppName
exec sp_trace_setevent @TraceID, 10, 3,  @on    --RPC:Completed, DatabaseID
exec sp_trace_setevent @TraceID, 10, 12, @on    --RPC:Completed, SPID
exec sp_trace_setevent @TraceID, 10, 13, @on    --RPC:Completed, Duration
exec sp_trace_setevent @TraceID, 10, 14, @on    --RPC:Completed, StartTime
exec sp_trace_setevent @TraceID, 10, 15, @on    --RPC:Completed, EndTime
exec sp_trace_setevent @TraceID, 10, 16, @on    --RPC:Completed, Reads
exec sp_trace_setevent @TraceID, 10, 18, @on    --RPC:Completed, CPU
exec sp_trace_setevent @TraceID, 10, 26, @on    --RPC:Completed, ServerName
exec sp_trace_setevent @TraceID, 41, 3,  @on    --SQL:StmtCompleted, DatabaseID
exec sp_trace_setevent @TraceID, 41, 10, @on    --SQL:StmtCompleted, AppName
exec sp_trace_setevent @TraceID, 41, 12, @on    --SQL:StmtCompleted, SPID
exec sp_trace_setevent @TraceID, 41, 13, @on    --SQL:StmtCompleted, Duration
exec sp_trace_setevent @TraceID, 41, 14, @on    --SQL:StmtCompleted, StartTime
exec sp_trace_setevent @TraceID, 41, 15, @on    --SQL:StmtCompleted, EndTime
exec sp_trace_setevent @TraceID, 41, 16, @on    --SQL:StmtCompleted, Reads

Listing 3: Setting the trace events

在数据库引擎中,Trace控制器会检查一个事件是否需要被捕获。如果需要则将事件的信息发送到SQL跟踪行集提供程序,或者如果你运行的Profiler,或者是文件。在Trace发送这些信息前,所有不需要的行会被移除。例如在我们定义的两个事件中,我们没有选择DatabaseName。然而SQL server 任然会为这两个时间捕捉DatabaseName列,只是它并不会被发送到GUI或者保存在文件中。

在最后一步中,我们使用存储过程sp_trace_setfilter为Trace定义了过滤条件。一个过过滤条件“SQL Server Profiler - f45d52c9-c0eb-45da-8bae-dc6f1a945251”是由脚本默认生成的,它过滤了一些由Profiler UI生成的“admin”查询(SELECT SERVERPROPERTY )。

在这个例子中,我们设置了一个过滤条件,只将Reads大于等于10000 (@bigintfilter = 10000)的查询语句或存储过程发送到目标文件中。再次提醒,这是晚期过滤,所有的事件和信息都会被捕捉。然后在发送到文件或客户端前根据筛选条件移除。

-- Set the Filters
DECLARE @intfilter INT
DECLARE @bigintfilter BIGINT

EXEC sp_trace_setfilter @TraceID, 10, 0, 7,
    N'SQL Server Profiler - f45d52c9-c0eb-45da-8bae-dc6f1a945251'
SET @bigintfilter = 10000
EXEC sp_trace_setfilter @TraceID, 16, 0, 4, @bigintfilter

Listing 4: Setting the trace filter

脚本的最后一段使用存储过程sp_trace_setstatus 启动Trace,并显示TraceID。这个唯一的TraceID用于停止Trace,也可以用于删除Trace定义。

-- Set the trace status to start
EXEC sp_trace_setstatus @TraceID, 1

-- display trace id for future references
SELECT  TraceID = @TraceID
GOTO finish

error: 
SELECT  ErrorCode = @rc

finish: 
go

Listing 5: Starting the trace

如果我们执行了这个脚本,Trace将被启动并将持续的运行和收集事件数据,直至我们停止它。现在,我们怎么将这些所熟知的技能,使用Extended Event替代呢?

查看event_counter, histogram 和pair_matching 目标数据

最后三种目标event_counter, histogram, 和pair_matching,需要你查看目标数据或者使用XQuery分析数据,这是仅有的两种查看聚合数据的方式。使用我们的XE_SampleCapture会话,或其他具有histogram 目标的会话,右键选择histogram 目标并打开目标数据视图,如图6所示的输出。

澳门新濠3559 10

Figure 6

histogram 目标数据视图开始可能是空的,也可能会有数据。这个查看器需要被刷新才会显示最新数据。为了手动跟新它,可以在histogram 目标窗口中右键点击Refresh,或者你可以选择 Refresh Interval 让窗口定时更新。

澳门新濠3559 11

Figure 7

histogram, event_counter 和pair_matching等三种目标在内存中保存数据,一旦你停止事件会话,内中种的数据也会飞释放,因而视图中的数据也会消失。如果你需要保存数据,你可以通过右键的Copy选项,或者右键的Export to CSV选项导出.csv文件(请参考图7)。

你可以在停止一个会话后选择复制或者保存当前显示在目标数据查看器中的数据,但是对于这些目标,一旦你在停止会话后刷新了查看器,数据将会丢失。

澳门新濠3559 12

Figure 8

澳门新濠3559 13

SELECT  xed.value('@timestamp', 'datetime') AS Creation_Date ,
        CAST(REPLACE(REPLACE(REPLACE(CAST(xed.query('.') AS NVARCHAR(MAX)),'&lt;', '<'),'&gt;', '>'),'&amp;apos;','''') AS xml) AS Extend_Event
FROM    ( SELECT    CAST([target_data] AS XML) AS Target_Data
          FROM      sys.dm_xe_session_targets AS xt
                    INNER JOIN sys.dm_xe_sessions AS xs ON xs.address = xt.event_session_address
          WHERE     xs.name = N'system_health'
                    AND xt.target_name = N'ring_buffer'
        ) AS XML_Data
        CROSS APPLY Target_Data.nodes('RingBufferTarget/event[@name="xml_deadlock_report"]')
        AS XEventData ( xed )
ORDER BY Creation_Date DESC

select * from sys.dm_xe_session_targets

SELECT    CAST([target_data] AS XML) AS Target_Data
FROM      sys.dm_xe_session_targets AS xt
                    INNER JOIN sys.dm_xe_sessions AS xs ON xs.address = xt.event_session_address
WHERE     xs.name = N'system_health'
          --AND xt.target_name = N'ring_buffer'

-- Parse the XML to show wait details
SELECT event_table.*
    FROM (
        SELECT CAST(event_data AS XML) xml_event_data 
        FROM sys.fn_xe_file_target_read_file(N'pathLogsystem_health*', NULL, NULL, NULL)
    ) AS event_table
    CROSS APPLY xml_event_data.nodes('//event') n (event_xml)
WHERE  event_xml.value('(./@name)', 'varchar(1000)') IN ('xml_deadlock_report')   

转换Trace到Extended Events 事件会话

将已经存在的Trace文件定义转换为事件会话,我推荐的方式 使用一个存储过程,他的作者是 Jonathan Kehayias。 你可以从( 这个脚本只能在SQL Server 2012及以后版本运行,以为SQL Server 2012以前的版本Extended Events并不支持所有的Trace事件。

手动转换Trace到Extended Events会话

如果由于某些原因你不能使用以上存储过程,微软文档介绍了一个手动转换过程:Convert an Existing SQL Trace Script to an Extended Events Session ()

在你的SQL实例中执行以上脚本用于创建这个存储过程。执行这个存储过程仅需要输入以下参数,如Listing 6 所示。

EXECUTE sp_SQLskills_ConvertTraceToExtendedEvents 
              @TraceID = 2, 
              @SessionName = 'XE_ReadsFilter_Trace', 
              @PrintOutput = 1, 
              @Execute = 0;

Listing 6: Converting a server-side trace to use Extended Events

参数@TraceID 是你要转换为Extended event 的Trace ID。因而,这个Trace必须存在,无论正在执行与否。在这里TraceID为2(从Listing 5的执行结果中获得)。

执行这个存储过程为ReadsFilter_这个UI提供了创建和管理会话功能,-1))将死锁写入error log。Trace.trc Trace生成Extended Event会话DLL脚本,如Listing7所示:

IF EXISTS ( SELECT 1
             FROM   sys.server_event_sessions
             WHERE  name = 'XE_ReadsFilter_Trace' )
    DROP EVENT SESSION [XE_ReadsFilter_Trace] ON SERVER;
GO
 CREATE EVENT SESSION [XE_ReadsFilter_Trace] ON SERVER
 ADD EVENT sqlserver.rpc_completed (
    ACTION ( sqlserver.client_app_name   -- ApplicationName from SQLTrace
    , sqlserver.database_id              -- DatabaseID from SQLTrace
    , sqlserver.server_instance_name     -- ServerName from SQLTrace
    , sqlserver.session_id               -- SPID from SQLTrace
                   -- EndTime implemented by another Action in XE already
                   -- StartTime implemented by another Action in XE already
   )
    WHERE 
   ( logical_reads >= 10000 ) ),
 ADD EVENT sqlserver.sql_statement_completed (
    ACTION ( sqlserver.client_app_name   -- ApplicationName from SQLTrace
    , sqlserver.database_id              -- DatabaseID from SQLTrace
    , sqlserver.server_instance_name     -- ServerName from SQLTrace
    , sqlserver.session_id               -- SPID from SQLTrace
                   -- EndTime implemented by another Action in XE already
                   -- StartTime implemented by another Action in XE already
   )
    WHERE 
   ( logical_reads >= 10000 ) )
 ADD TARGET package0.event_file (  SET filename =                                  'C:tempXE_ReadsFilter_Trace.xel' ,
                                   max_file_size = 5 ,
                                   max_rollover_files = 1 )
GO

Listing 7: The Extended Events event session

显示选项:定制列

无论哪种查看器,你都可以定制显示的列。默认情况下,只有事件名和时间戳显示在顶部的面板中,因为这两列是所有所有事件所共有的。当你选中顶部面板中的列时,详细面板会显示所有捕获的字段。想要在顶部面板中产看任何字段,你可以在详细面板中右键选择所需的列,并选择Show Column in Table。在图9中,我们添加了duration 字段到顶部面板中。

澳门新濠3559 14

Figure 9

我们可以重复以上步骤将我们需要的字段都添加到顶部面板中。这些列可以通过拖拽列名进行左右移动位置。或者,你可以通过 Extended Events工具栏上的Choose Columns… 按钮,或者Extended Events | Choose Columns… 菜单选项来选择列或者配置列的顺序。如果你没有看Extended Events工具栏,可以使用View | Toolbars菜单来选择。

澳门新濠3559 15

Figure 10

在查看器中可以使用的技巧之一就是合并列,换句话说你可以根据已有的两列或更多列来创建一个新列。这对捕捉查询语句存储在不同字段的事件非常有帮助。例如sp_statement_completed 事件使用statement 字段存储查询语句,batch_completed 事件使用batch_text 字段。如果你同时将这两个字段都加到顶部面板中,你会发现对于batch_completed 事件statement 字段总是为NULL,同样,对于sp_statement_completed事件batch_text 字段也为NULL。

澳门新濠3559 16

Figure 11

数据在不同的字段中会阻碍我们的分析,但是如果将他们合并为一列缓解了这一问题。在Choose Columns… 窗口的右下角你可以找到一个Merged columns。选择New,为新列提供一个名字,并选择你要合并的列,如图12所示。

澳门新濠3559 17

Figure 12

新的合并列将以[QueryText]为名显示在查看器中。注意合并列选项专为字符串连接设计,因此如果你选择了非字符串数据类型,并不是所有的数据都可以正常显示。例如,如果你尝试连接logical_reads 和database_id,它金辉显示logical_reads。

在你根据所需的字段定制查看器后,在需要的情况下,你可以通过 Extended Events菜单来保存配置,或者通过Display Settings按钮。

 澳门新濠3559 18

Figure 13

配置文件以.viewsetting 文件格式保存,然后在以后需要查看或分析event_file 目标时,通过同样的菜单打开这个文件。这个文件可以被共享或者保存在多个用户可以访问的网络地址中。最后,一旦顶部面板中显示了所有你需要的列后,如果你要在查看器中移除详细面板,可以选择Extended Events | Show Details Pane菜单。

step2,设置会话属性(Set Session Properties)

 

检查Extended Event事件会话

与我们分析由Profiler生成的服务器端Trace脚本一样,我们会通过不同的段落逐步分析Extended Events事件会话是如何创建的。

分析数据

查看器提供了一个我们所熟悉的事件视图。但是与Profiler UI不同,在这里我们有能力对列进行排序并过滤数据,extended events查看器提供了更好的数据分析选项,我们不再需要将数据在导出到表中,或者使用第三方工具。

澳门新濠3559 19

  由于sysem_health有两个输出的target,一个ring_buffer,一个是target_file,无奈下从event_file查询捕获的死锁信息,这里又是没问题的,正常捕获到了。

创建事件会话

脚本首先包含了一个IF段落声明,用于检查是否有同名事件会话存在,如果存在则删除它。这样可以避免在创建事件会话时出现错误。

IF EXISTS ( SELECT  1
            FROM    sys.server_event_sessions
            WHERE   name = 'XE_ReadsFilter_Trace' )
    DROP EVENT SESSION [XE_ReadsFilter_Trace] ON SERVER;
GO

Listing 8: Checking for the existence of an event session with the same name

这段脚本接着使用CREATE EVENT SESSION 语法创建了一个事件会话(

/* Extended Events */

CREATE EVENT SESSION [XE_ReadsFilter_Trace]
ON SERVER
-- Create a Queue
DECLARE @rc INT
DECLARE @TraceID INT
DECLARE @maxfilesize BIGINT
SET @maxfilesize = 5 

-- Please replace the text
--InsertFileNameHere…etc…

EXEC @rc = sp_trace_create @TraceID OUTPUT, 0, N'InsertFileNameHere',
    @maxfilesize, NULL 
IF ( @rc != 0 )
    GOTO ERROR

 

Listing 9: Create the event session

排序

你可以做的最简单的事情之一就是对事件排序。仅需右键选择列名然后选择Sort Ascending 或Sort Descending排序(你也可以直接点击列名排序,再次点击的时候以反序排序)。当你想要快速的找到执行时间最长,IO最高的事件时,对UI上的数据排序是最简单的方式。

step3,选择模板(Choose Template)

  澳门新濠3559 20

添加Event和Actions

接下来,Extended Events脚本使用CREATE EVENT SESSION 的 ADD EVENT 子句指定了第一个事件,此处为 rpc.completed事件,并且接下来指定了事件触发时执行的一些额外动作,这个例子中为收集额外的四个事件数据列。

/*Extended Events*/
ADD EVENT sqlserver.rpc_completed (
    ACTION (
      sqlserver.client_app_name
    , sqlserver.database_id
    , sqlserver.server_instance_name
    , sqlserver.session_id
           )

 

/* Trace */
-- Set the events
declare @on bit
set @on = 1
exec sp_trace_setevent @TraceID, 10, 10, @on
exec sp_trace_setevent @TraceID, 10, 3,  @on
exec sp_trace_setevent @TraceID, 10, 12, @on
exec sp_trace_setevent @TraceID, 10, 13, @on
exec sp_trace_setevent @TraceID, 10, 14, @on
exec sp_trace_setevent @TraceID, 10, 15, @on
exec sp_trace_setevent @TraceID, 10, 16, @on
exec sp_trace_setevent @TraceID, 10, 18, @on
exec sp_trace_setevent @TraceID, 10, 26, @on

 

Listing 10: Adding actions

这里有几处Extended Events和Trace关键的不同点需要指出。第一,注意事件名和Actions中收集的数据列(如:client_app_name, database_id),他们是文本。我们不需要再查询哪些数字对应的事件或者数据列!与SQL Trace相比,书写阅读Extended Events脚本变的更加简单。

其次,注意Extended Events脚本中并没有指定全部的数据列。事实上,许多数据列被定义为事件的默认负载被收集。我们显然不需要在脚本中指定这些默认列。但是我们可以使用UI来查看事件的默认负载由哪些列组成, 我们会在下一阶教程中讲解。

这是Trace 和Extended Events一个重要的行为不同。SQL Trace 默认行为是收集所有可能有用的列。然后由用户过滤任何不需要的信息。Extended Events 更加高效,每个事件有一组由最少的数据列组成的默认负载,在事件出发时总会被默认收集。如果我们需要收集任何不再默认负载中的列,我们需要以Actions方式添加他们。例如,在RPC:Completed事件中添加的Actions:client_app_name, database_id, server_instance_name 和session_id, 他们都不属于事件的默认负载。收集这些Actions是可选的。

因为只有默认负载事件列会被包含在时间中,因此初始化事件收集的开销相对较小。Actions数据收集是在谓词过滤后才发生的,因此收集大量的Actions,或者高消耗的Actions(如内存Dump),都会增加Extended Events会话的消耗。因而,审慎的选择额外的数据收集对捕获事件尤为重要。我们会在下一阶中详细讨论这个主题。

过滤

使用工具栏上的Filters… 按钮(或者Extended Events | Filter…菜单)对查看器中的数据进行过滤。我们可以使用时范围或者其他任何字段进行过滤,包括为事件收集的全局字段。进一步,我们可以通过使用AND,OR和其他运算(=, <>, Like, Not Like, Null等)创建复杂的条件,就像我们在谓词中一样。

澳门新濠3559 21

Figure 14

应用过滤后,结果集可以被保存在新的.xel文件中。如果原始的.xel文件被关闭时没有移除过滤条件,请注意重新打开文件时,这些过滤依然生效。一个好的习惯是检查当前显示的事件数量,来判断是否有过滤条件被应用在了分析上,如图15所示。

澳门新濠3559 22

 

Figure 15
可以通过filters 窗口或者选择Extended Events | Clear All Filters菜单来移除过滤条件。

澳门新濠3559 23

  因此就可以说,系统默认自带的sysem_health扩展事件,捕获死锁本身是没有问题的,问题出在扩展事件的输出目标ring_buffer上。
  在不过滤所有的扩展事件情况下,从ring_buffer里面解析出来的数据还有个特点,其不包含最近一段时间的任何一种事件信息。
  也就是说,ring_buffer中解出来的事件信息,是当前时间前一段时间的事件信息,并不包含所有的事件信息,以及最近一段事件所有的事件信息。
  当然你可以说ring_buffer是先进先出的队列模型,那也应该留下新的事件,而不是解析不出来最新的事件信息。

定义predicate

在选择过事件和额外的Actions后,接下的一段定义了过滤器。

/* Extended Events */
    WHERE 
     ( logical_reads >= 10000 )
/* Trace */

-- Set the Filters
declare @intfilter int
declare @bigintfilter bigint

exec sp_trace_setfilter @TraceID, 10, 0, 7, N'SQL Server Profiler - f45d52c9-c0eb-45da-8bae-dc6f1a945251'
set @bigintfilter = 10000
exec sp_trace_setfilter @TraceID, 16, 0, 4, @bigintfilter

 

Listing 11: Adding a filter

回忆下当我们使用Profiler定义trace时,我们使用了Sp_trace_setfilter设置了一个过滤,排除所有小于10000Reads的事件数据。在事件会话定义中,这个过滤,术语为谓词,是一个简单的WHERE子句。

Extended Events执行早期过滤。换句话说,在事件基础数据收集后里立即执行谓词,只有符合过滤条件的事件实例才会被触发。这种工作机制与SQL Trace和Profiler的晚期过滤相比,在数据收集时的开销更小。

合并.xel 文件

在我们经常需要过滤结果来分析数据的同时,在一些情况下,我们也需要从多个文件中抓取数据进行全面的分析。一个例子,当我们在跨越多个节点的Availability Group中排除故障时,你可能为每一个节点设置一个会话,然后将多个节点中的目标文件合并在一起查看。为完成这个目标,通过SSMS选择File | Open | Merge Extended Events Files菜单,找到文件路径并将他们添加到窗口中,然后选择OK。

澳门新濠3559 24

Figure 16

合并后的文件将按照一个结果集输出进行分析,同时你可以保存为单独的.xel文件。

step4,选项捕获的事件(Select Events to Capture)

原因分析:
  参考了sqlskill上的一篇文章,这篇文章深入地解析了这个问题,
  简单说就是:
  ring_buffer并没有“丢失”事件信息,至于为什么解析不出来,要从ring_buffer解析方式开始,ring_buffer扩展事件从sys.dm_xe_session_targets 这个DMV中解析的,
  受到sys.dm_xe_session_targets 这个DMV的目标数据列target_data字段只能容纳大约4 MB的XML数据的限制。
  当ring_buffer捕获的事件(内存中的二进制数据)转换为XML格式大于(大约)4MB的情况下,超过4MB的其他的事件会被被“截断”,
  从sys.dm_xe_session_targets解析出来的XML文件优先输出更早的事件,所以我们预期下的最近发生的事件是无法看到的。
  因此,正如上文中遇到的情况一样:“丢失”部分事件信息,并且没有最近的事件信息。

添加其他事件

此时rpc_completed 事件已经配置完成。添加其他的事件仅需使用ADD EVENT子句再次添加,如Listing12所示的添加sql:statement_completed事件。

ADD EVENT sqlserver.sql_statement_completed(
   ACTION 
   (
           sqlserver.client_app_name         -- ApplicationName from SQLTrace
          , sqlserver.database_id            -- DatabaseID from SQLTrace
          , sqlserver.server_instance_name   -- ServerName from SQLTrace
          , sqlserver.session_id             -- SPID from SQLTrace
                   -- EndTime implemented by another Action in XE already
                   -- StartTime implemented by another Action in XE already
   )
   WHERE 
   (
           logical_reads >= 10000
   )

Listing 12: Adding a second event to the event session

再次,我们可以选择额外的数据列。Extended Events的灵活性在于我们可以为每个事件设置相同或是不同的过滤条件。这点在Trace中无法做到,过滤条件对于所有事件生效。另外在Extended Events中我们可以设置更多强大的过滤条件,如我们可以使用AND和OR条件,在此我们不做过多讨论。

搜索

Profiler UI中也提供了搜索功能,这对于搜索查询语句中的字符尤为有用。Extended events 查看器提供了同样的功能,位于工具栏中的望远镜图标(或选择Extended Events | Find菜单)。

澳门新濠3559 25

Figure 17

在Find窗口中你可以搜索任何已经添加到顶部面板的字段。如果你没有在查看器的顶部面板添加任何额外的字段,默认情况下仅可以搜索name 和timestamp列。每次仅可以在一个列中进行搜索,你可以选择其他的标准的搜索选项,包括匹配大小写和全字匹配,同时也可以使用通配符或者正则表达式。

该Tab分为两个Pane,左边Pane用于搜索Event,在Event library中,输入需要进行追踪的Event 名称,在选择一个Event之后,Wizard会显示出该Event的Description和 Event Fields,Event fields 是描述Event输出的字段。右边Pane用于列出已经选中的Events 列表。

总结:  
  以此来看,使用ring_buffer为扩展事件的target,潜在以下问题
  1,解析出来的结果并不可靠(完整),可能无法解析到最近的部分事件。
  2,以下译文中还会提到,ring_buffer作为target可能会撑爆内存的情况,所以要谨慎使用。
  3,同样下文会提到,SSMS的UI对ring_buffer中的事件支持的并不好,对于ring_buffer的target,UI也仅仅是show出来一个XML文件,必须要自己解析,而不像event_file中那样表格化展示(可读性)
  因此要尽量避免在扩展事件中使用ring_buffer target。

指定目标

在添加所有事件后,我们使用ADD TARGET 来指定输出目标,SQL Server将收集的数据以及相关的Actions写入目标。在Trace中我们可以选择输出至文件,或者试试写入Profiler,虽然不被推荐。在Extended Events我们也有多个目标可以选择,包括最基本内存存储(ring_buffer)和文件系统存储(event_file),同时又一些高级的目标可以提供数据聚合功能。

在这个例子中,我们将使用event_file作为目标,这点与Trace输出至.trc文件类似,但是我们需要在文件中指定文件扩展名。

/* Extended Events */

ADD TARGET package0.event_file
(
      SET filename = 'C:tempXE_ReadsFilter_Trace.xel',
             max_file_size = 5,
             max_rollover_files = 1
)
/* Trace */

-- Create a Queue
declare @rc int
declare @TraceID int
declare @maxfilesize bigint
set @maxfilesize = 5 

exec @rc = sp_trace_create @TraceID output, 0, N'InsertFileNameHere', @maxfilesize, NULL 
if (@rc != 0) goto error
Listing 13: Specifying the target for the event session

Listing 13: Specifying the target for the event session
同样我们可以设置文件大小,以及我们可以设置创建的滚动跟新文件数量

标记行

当找到含有我们感兴趣的数据行时,我们可以在查看器中使用书签标记他们(熟悉使用Profiler的用户过去可能经常会写下行号,这都已经成为过去时了)。选中我们感兴趣的行,然后点击工具栏中的Bookmark 按钮(或者点击右键菜单中的Toggle Bookmark)即可。书签图标会显示在查看器的最左边。

 澳门新濠3559 26

澳门新濠3559 27

Figure 18

当你标记完所有感兴趣的行后,你可以使用工具栏上的向前向后导航按钮快速的访问他们(再不需要无止境的滚动鼠标了)。这些按钮使你可以轻松的浏览整个文件,仅停止在那些感兴趣的事件上。如果过你想要移除某个书签,仅需右键点击行后选择Toggle Bookmark。如果你想要删除所有书签可以使用Clear All Bookmarks按钮。请注意,当你关闭文件并再次打开时所有的书签都会丢失。

澳门新濠3559 28

 

设置事件会话选项

最后,在我们的会话定义中,我们还有许多可选的会话配置项,如最大内存大小以及调度延迟。因为我们在脚本中没有指定这些选项,因此会使用默认值。会话设置会在下一阶中详细讨论。
如果我们再花一分钟回顾一下整个Extended Events会话定义,你会发现它非常直观而且对于这个DDL每一部分的理解不会有任何困难。

分组

当我们在事件数据中合并列、过滤数据和查找指定值时,可能很有趣并且对我们分析数据有帮助,但是它们不能帮我们从整体上找到数据的发展趋势或者异常现象。进入分组,这个分析选项是extended events 查看器远远超越Profiler的原因之一。对于查看器顶部面板中的任何字段选,你都可以右键点击它并选择Group by this column。

澳门新濠3559 29

澳门新濠3559 30

Figure 19

你也可以使用Grouping… 按钮或者 Extended Events | Grouping… 选项,他们的好处是你可以轻松的使用多个列作为分组条件。在查看器中,在我已经使用其中一列进行分组后,如果我右键选择另外一列进行分组,原来的分组条件将被移除。在很多情况下你可能会需要根据多个列进行分组,这时,使用分组窗口将允许你选择多列,并设置列的顺序。

澳门新濠3559 31

澳门新濠3559 32

Figure 20

通用的分组字段包括:

  • event (事件名称)
  • object_name or object_id
  • database_name or database_id
  • login fields (e.g. username, nt_username)
  • client_app_name
  • client_hostname

在duration, logical_reads 或CPU等字段上分组没有任何意义。因为他们提供的是事件的度量指标,但你并不是在寻找那些20ms中完成的事件,或者需要特定IO数量的事件。 而是在某一服务器,或者特别的程序,或数据库的事件中寻找某些模式或者异常情况。

尝试使用Statement(或Batch_Text)进行分组的情况会经常遇到,因为我们想找到那些查询会被频繁的执行。当我们使用SQL Trace 捕获数据时,第三方工具可以为我们提供这些分析,如ClearTrace 和ReadTrace。这些工具会格式化文本数据并进行聚合,一次你可以查看指定的查询或存储过程的执行频率。

不幸的是,Extended Events不具有格式化数据功能。如果你尝试在statement 或batch_text (或我们定义的 QueryText) 字段上进行分组,你最终得到的结果可能是所有数据都只有一行。

澳门新濠3559 33

Figure 21

你需要在query_hash 或query_plan_hash字段上进行分组,而不是在查询文本上。这两个字段在 SQL Server 2008 中被添加到sys.dm_exec_query_stats 管理视图,通常也被称为"query fingerprints"。

具有相同文本的查询具有相同的query_hash,因此可以使用它作为分组条件查看一个查询的执行频率。

澳门新濠3559 34

Figure 22

一旦你可以将相同的查询进行分组,你接下来就可以对每个分组计算平均值,最大值,最小值等额外的分析。

Step5,选择捕获的字段(Capture Global Fields)

 

运行事件会话

与Trace一样,Extended Event会话不会被默认启动。为了启动一个会话,我们需要使用Listing 14中所示的ALERT语句。

ALTER EVENT SESSION [XE_ReadsFilter_Trace]
 ON SERVER
 STATE=START;
GO

Listing 14: Starting the event session

执行启动后,我们可以运行一段脚本来验证Extended Events是否已经启动。

/* Extended Events */

SELECT
  [es].[name] AS [EventSession],
 [xe].[create_time] AS [SessionCreateTime],
  [xe].[total_buffer_size] AS [TotalBufferSize],
  [xe].[dropped_event_count] AS [DroppedEventCount]
FROM [sys].[server_event_sessions] [es]
LEFT OUTER JOIN [sys].[dm_xe_sessions] [xe] ON [es].[name] = [xe].[name];
GO
/* Trace */

SELECT 
  [id] AS [TraceID],
  CASE
    WHEN [status] = 0 THEN 'Not running'
    WHEN [status] = 1 THEN 'Running'
  END AS [TraceStatus],
  [start_time] AS [TraceStartTime],
  [buffer_size] AS [BufferSize],
  [dropped_event_count] AS [DroppedEventCount]
FROM [sys].[traces];
GO

Listing 15: Check to see which event sessions and traces are running

在这个例子里,我们可以看到Figure 3中的输出,他们显示了我们所创建的用户事件会话和Trace,同样,事件会话和Trace已经被启动了。

就像Trace由一个默认直至执行的Trace(TraceID =1), Extended Evetns也有system_health 事件会话,这个与默认Trace并不完全一样。我们在下阶中再看system_health 会话。如果你使用了Availability Groups (AG),也会有一个AlwaysOn_health 会话一直执行,来收集AG相关的信息以及故障检测事件。

澳门新濠3559 35

Figure 3: Which traces and event sessions are running?

在我们启动了Trace和Session后,我们可以使用ALTER SESSION来停止事件会话,使用sp_trace_setstatus停止Trace。

/* Extended Events */

ALTER EVENT SESSION [XE_ReadsFilter_Trace]
  ON SERVER
  STATE=STOP;
GO
/* Trace */

DECLARE @TraceID INT = 2;
EXEC sp_trace_setstatus @TraceID, 0; 
GO

Listing 16: Stopping the extended events session and trace

此时,没有数据被收集,但是我们定义的Trace和事件会话都还在,我们可以根据需求再次启动他们,或者将他们的定义完全删除。

/* Extended Events */

DROP EVENT SESSION [XE_ReadsFilter_Trace]
    ON SERVER;
GO
/* Trace */

DECLARE @TraceID INT = 2;
EXEC sp_trace_setstatus @TraceID, 2; 
GO

Listing 17: Removing the extended events session and trace definition

我们并不推荐在事件会话完成后将它删除。也许很多人有在使用Trace时有这个习惯,在Trace中当SQL实例被重启后,除了默认Trace其他Trace定义会全部丢失。这个也是Extended Events与Trace重要的不同点:会话定义会作为元数据保存在服务器中,并且会被持久化。创建过事件会话后,你就可以根据需要启动或停止它了。

聚合

最后一个分析工具是使用UI上的聚合选项。在应用聚合前你必须使用至少一个字段进行分组。对于非数字字段,数学计算无法被应用(如,batch_text, database_id, xml_report),唯一可用的聚合选项是COUNT。对于数字字段,额外的选项包括SUM, MIN, MAX, 和AVG。我们可以在字段上点击右键并选择 Calculate Aggregation…,应用聚合选项。你可以可以使用工具栏中的 Aggregation…按钮,或者Extended Events | Aggregation…菜单。

澳门新濠3559 36

Figure 23

图24展示了聚合后的结果。

澳门新濠3559 37

Figure 24

你可以为不同的字段应用不同的聚合方法,如AVG 应用到duration, MAX应用到logical_reads,但是对于一个字段每次只能应用一个聚合选项。也就是对于一个字段你仅可以查看AVG 或者只查看MAX。这里有一个有趣的变通方式可以为相同的字段应用不同的聚合选项。你可以创建一个合并列来表示那一列。例如,如果你即想看duration的平均值也想看duration的最大值,你可以首先将AVG 聚合函数应用到duration列上,然后我们在duration 上创建一个合并列(稍不同的名字),另外一列选择一个总是为零的字段如connection_reset_option。一旦你创建了合并列,你就可以在它上面应用MAX 了。

 澳门新濠3559 38

澳门新濠3559 39

Figure 25

关闭和重新打开文件时,合并列是被持久化的。但是分组和聚合却不可以,他们并不会被保存在.viewsetting文件中。

选择Event发生时其他信息,这些信息一般跟Session相关,例如Database_id 和 Database_id 就是Event发生的database 信息。一般会将sql_text也选中,便于查看触发Event的SQL语句。

 

总结

你现在已经知道如何将SQL Trace 的知识映射到Extended Events中了,我们可以使用T-SQL达到我们的目标。我们下一步将详细的看一下DDL, 并且转向Extended Events的UI。我们在一下阶中解决这些问题。

总结

SQL Server 2012中,用户最大的胜利是它引入了目标数据查看器,这意味着我们不在需要T-SQL和XQuery就可以分析事件数据了。目标数据查看器是的我们可以产看除ring_buffer 以外所有的目标事件数据(还有etw_classic_sync_target,它仅可以通过 ETW 工具进行查看)。

另外, Extended events UI中比Profiler UI提供了更多重要的数据分析选项。除了搜索和过滤,我们现在可以对数据进行排序,分组,聚合等复杂的分析, 而不再需要将数据导入表中并使用SQL进行分析,或者使用ReadTrace这样的第三方工具。

澳门新濠3559 40

 

Step6,设置会话时间的过滤器(Set Session Event Filters)

如下是译文,原文地址:

澳门新濠3559 41

 

Step7,指定会话数据的存储(Specify Session Data Storage)

(标题)我为什么讨厌扩展事件中的ring_buffer target

制定输出数据存储的目标(target),该tab中列出 Event File target 和 ring buffer target。

我曾经多次遇到扩展事件中有关ring_buffer target同样的问题,
我想我会写一篇博客文章,解释了我教的所有信息关于ring_buffer target和与之关联的问题。
自从sqlserver 2012发布以及扩展事件新UI的更新,我以后坚决不会再使用ring_buffer target
事实上,正如文章标题所言,我确实很讨厌ring_buffer target,这篇文章中我将会阐述我讨厌ring_buffer target的原因,并且希望说服应该使用file_target代替。

Event File target使用File来存储Session Output,当需要存储大量数据集时,使用该选项。

丢失事件

Ring buffer target使用Memory buffer来存储Session Output,如果分配的memory buffer用完,target会将最老的Events删除,以容纳新的Events,使memory buffers中存储的是most recent data。

这是我通过电子邮件解释关于ring_buffer目标的最常见问题。一般来说,如下是典型的问题描述:

澳门新濠3559 42

我从SQL Server中心的一篇文章中得到了下面的代码,它不起作用。我遇到的问题是,当我运行代码时,即使我知道应用程序中刚刚发生了一个死锁事件,它也不会显示任何死锁信息。
似乎我只在system_health会话中看到较旧的死锁,但从来没有看到最新的死锁。我打开了Trace 1222并以这种方式获取信息,那么为什么不这样做。

Step8,查看扩展事件会话的汇总信息,开始创建事件会话。

实际情况是,事件(event)实际上在就那里,你无法看到(你预期的事件)是因为sys.dm_xe_session_targets 这个DMV的限制。
这个DMV的目标数据列只能输出大约4 MB的XML数据。
Bob Ward20009年的时候在CSS SQL Server工程师博客中解释了DMV的4 MB格式XML限制的信息。
为了证明这种限制的结果,让我们来看看在SQL Server 2012 SP1 CU7服务器上的系统健康事件会话中包含的事件数量,我可以使用下面的查询来查看信息。

二,查看扩展事件捕获的消息

SELECT
    ring_buffer_event_count, 
    event_node_count, 
    ring_buffer_event_count - event_node_count AS events_not_in_xml
FROM
(    SELECT target_data.value('(RingBufferTarget/@eventCount)[1]', 'int') AS ring_buffer_event_count,
        target_data.value('count(RingBufferTarget/event)', 'int') as event_node_count
    FROM
    (    SELECT CAST(target_data AS XML) AS target_data  
        FROM sys.dm_xe_sessions as s
        INNER JOIN sys.dm_xe_session_targets AS st 
            ON s.address = st.event_session_address
        WHERE s.name = N'system_health'
            AND st.target_name = N'ring_buffer'    ) AS n    ) AS t;

SQL Server 扩展事件捕获的消息,叫做Target,使用Target来存储Events,Target 能够把捕获的消息存储到文件中(扩展名是 .xel),或 memoy buffer 中(Ring Buffer),Target能够以同步或异步方式处理数据,事件的数据都是以XML格式存储。

澳门新濠3559 43

三,以文件存储Target的数据

ring_buffer_event_count是RingBufferTarget根元素返回的XML文档的eventCount属性(译者注:ring_buffer_event_count是RingBufferTarget捕获到的事件的总数)
event_node_count是sys.dm_xe_session_targets 这个 DMV中返回的ingBufferTarget/event nodes中事件的个数(两者的差值就是所谓丢失的事件个数)
这里你可以看到ring_buffer target中一共有5000个事件,(原因是)system_澳门新濠3559,health会话基于2012新的MAX_EVENTS_LIMIT选项设定在5000。
不过,仅仅有3574个事件被DMV中的XML输出了出来,剩下有1426个事件仍然不可用(不可见,无法解析出来),尽管他们是滞留在内存中的。
sys.dm_xe_session_targets 的XML文件优先输出更早的事件,所以我们预期下的最近发生的事件是无法看到的。

Target对于扩展事件产生的数据,总是先缓存在内存buffer中,等到内存buffers积累足够数量的数据之后,再将内存中的所有数据写入到文件中。文件中的数据滞后于内存 buffer,这就是异步写(Async Write),能够减少IO的次数,提高IO效率。事件文件类型的taget的扩展名是xel,以XML格式存储Target 数据,使用 sys.fn_xe_file_target_read_file 函数查看事件文件中存储的数据。

译者注,如下是system_health中ring_buffer MAX_EVENTS_LIMIT选项设定在5000的值:

1,以Rollover 方式复用事件文件

澳门新濠3559 44

事件文件类型的Target 以 rollover 方式复用文件,例如,如果 max_rollover_files=3,那么系统中最多保留 3个 xel文件,文件命名:xxx_0.xel,xxx_1.xel,xxx_2.xel。当文件xxx_0.xel达到Max_File_Size时,Target执行一次rollover,将文件:xxx_0.xel删除,创建新文件:xxx_3.xel,并用该文件存储事件数据。

我们可以观察扩展事件目标占用的内存和DMV中的XML二进制数据占用的内存情况,使用如下查询

2,从 sys.dm_xe_session_targets 中查看事件文件的存储路径

SELECT
    target_data.value('(RingBufferTarget/@memoryUsed)[1]', 'int') AS buffer_memory_used_bytes,
    ROUND(target_data.value('(RingBufferTarget/@memoryUsed)[1]', 'int')/1024., 1) AS buffer_memory_used_kb,
    ROUND(target_data.value('(RingBufferTarget/@memoryUsed)[1]', 'int')/1024/1024., 1) AS buffer_memory_used_MB,
    DATALENGTH(target_data) AS xml_length_bytes,
    ROUND(DATALENGTH(target_data)/1024., 1) AS xml_length_kb,
    ROUND(DATALENGTH(target_data)/1024./1024,1) AS xml_length_MB
FROM (
SELECT CAST(target_data AS XML) AS target_data  
FROM sys.dm_xe_sessions as s
INNER JOIN sys.dm_xe_session_targets AS st 
    ON s.address = st.event_session_address
WHERE s.name = N'system_health'
 AND st.target_name = N'ring_buffer') as tab(target_data)
select s.name as xe_session_name,
    cast(st.target_data as xml) as target_data
from sys.dm_xe_sessions s 
inner join sys.dm_xe_session_targets st 
    on s.address=st.event_session_address
where s.name='xe_session_name'

澳门新濠3559 45

3,从xel文件中检查target的输出

这里我们可以看到,二进制数据占用的内存大约为1.7MB,不过一旦序列化为XML,文件的大小就变为大约4.7MB,比二进制数据空间要大
问题的本质就在于,扩展事件生成的特点,决定了他紧凑的二进制格式的,但是序列化的格式化XML会为这些事件增加存储空间。

SELECT *, CAST(event_data AS XML) AS 'event_data_XML'
FROM sys.fn_xe_file_target_read_file('file_name*.xel', NULL, NULL, NULL)

system_health事件会话特别倾向于收集最多5000个事件但ring_buffer,DMV实际上只能输出一小部分事件会话。
最有可能的是,sp_server_diagnostics_component_output和xml_deadlock_report具有相当大的事件是(占用的空间),因为这两个事件返回的XML的大小取决于它们何时触发的条件的具体情况。

四,Ring Buffer Target

我发现在繁忙的服务器上出现问题时,sp_server_diagnostics_component_output事件的大小超过了512KB,
因此当输出XML中包含其中一个事件时,对ring_buffer目标,由DMV返回的数据可能会受到很大限制。

Ring buffer target将事件数据保存到内存中,事件数据以XML格式存储。一旦事件数据把分配的内存Buffers 用尽,那么最老的事件数据将被清除。

 

1,存储模式

没有UI的支持

ring buffer target简单地把数据存储到内存中,这种target模式能够采用两种模式来管理事件:

这对我来说可能是我日常工作中不再使用ring_buffer作为输出目标的最大原因。
扩展事件UI不支持分解ring_buffer目标中包含的信息, UI的唯一功能是显示由sys.dm_xe_session_targets DMV的target_data列输出的XML。

  • 第一种模式是严格地先进先出(first-in first-out ,FIFO),也就是说,当分配的内存被target耗尽时,从内存中移除创建时间最早的事件。
  • 第二种模式是per-event 先进先出模式,也就是说,每一种类型的事件都持有一个计数。在这种模式下,当分配的内存被target耗尽时,每个类型中创建时间最早的事件从内存中被移除。

澳门新濠3559 46

2,从 sys.dm_xe_session_targets 中查看target输出

这意味着要使用数据,您必须打开XML并扫描事件,或编写XQuery以将XML解析为表格形式,这要求您知道事件会话中使用的事件,列和操作定义来真正访问数据。
如果我正在进行短期数据收集,并且不希望它保存到SQL Server 2012上的文件系统中的文件,我只需选择实时视图就可以将数据流式传输回UI的列表中,
在这种情况下,我不必处理XML并可以快速找到我感兴趣的信息。
对于任何长期任务,甚至查看system_health事件会话中的信息,我都使用file_target,UI可以读取和处理事件,无需手动执行任何XQuery。

SELECT name, target_name, CAST(xet.target_data AS xml)
FROM sys.dm_xe_session_targets AS xet
JOIN sys.dm_xe_sessions AS xe
   ON (xe.address = xet.event_session_address)
WHERE xe.name = 'session_name'

当心内存的使用

 五,使用SSMS查看Target数据

在生产服务器上配置ring_buffer目标的方式需要非常小心,这对我来说是前所未闻的。
两周之前,Andy Galbraith遇到一个所有连接报701系统内存不足的错误,
经过分析,Andy发现在内存16GB,最大内存(max server memory)配置为11000MB的服务器上,MEMORYCLERK_XE memory clerk 占用了10GB的内存,
问题就在于,一个扩展事件配置了收集最大(MAX_EVENTS_LIMIT)1,000,000 个事件,但是没有配置最大内存限制,
因此内存的使用就基于扩展事件收集到的事件个数,并且没有最大的内存使用限制,那么它就可以使用无限的内存,在内存有限的情况下,从而导致服务器上出现问题。

通过TSQL 脚本获取的Target 输出都是以XML格式显示的,通过View Target Data能够以 表格 方式查看Target的输出

 

澳门新濠3559 47

六,查询会话(session)和 target

1,查看扩展事件的Session 配置

select s.name,
    s.total_regular_buffers*s.regular_buffer_size/1024 as total_regular_buffer_kb,
    s.total_buffer_size/1024 as total_buffer_kb,
    s.buffer_policy_desc,
    s.flag_desc,
    s.dropped_event_count,
    s.dropped_buffer_count
from sys.dm_xe_sessions s

字段注释:

Regular buffer:大多数时间下,扩展事件会话使用的是常规的buffer,这些buffer容量大,存储很多事件的信息。特别地,每一个扩展事件会话都会有三个或更多的buffer。常规buffer的分配是由SQL Server决定的,而SQL Server基于 MEMORY_PARTITION_MODE 选项来设置内存分区,常规buffer的size和 MAX_MEMORY选项的设置相同。

buffer_policy_desc:用于表述当buffer耗尽时,扩展事件会话是如何处理新触发的事件:

  • Drop event
  • Do not drop events
  • Drop full buffer
  • Allocate new buffer

2,查看会话target的配置

select s.name as xe_session_name,
    st.target_name,
    st.execution_count,
    st.execution_duration_ms/st.execution_count as avg_execution_ms,
    st.target_data
from sys.dm_xe_session_targets st 
inner join sys.dm_xe_sessions s 
    on st.event_session_address=s.address

当Target的名称是 event file 时,Session 输出的数据实际上是存储在Event file中。

当Target的名称是 ring buffer时,Session 输出的数据存储在内存 buffers中,通过 sys.dm_xe_session_targets的 target_data 字段查看

 

 

参考文档:

SQL Server Extended Events Targets.aspx)

sys.dm_xe_sessions (Transact-SQL).aspx)

sys.dm_xe_session_targets (Transact-SQL).aspx)

sys.fn_xe_file_target_read_file (Transact-SQL).aspx)

How to Query Extended Events Target XML

Realistic troubleshooting example of extended events (XEvent) usage in SQL Server 2008 – Part 1

Using Xquery to query Extended Events asynchronous file target results

编辑:数据库 本文来源:这个UI提供了创建和管理会话功能,-1))将死锁写

关键词: 澳门新濠3559