首页 > 数据库 >解决 SQL Server 中 CPU 使用率过高的问题

解决 SQL Server 中 CPU 使用率过高的问题

时间:2022-10-18 14:00:19浏览次数:36  
标签:qs trace SQL CPU Server time 查询 event

本文提供了诊断和修复运行 Microsoft SQL Server 的计算机上 CPU 使用率过高导致的问题的过程。 尽管在 SQL Server 中出现 CPU 使用率过高有许多可能原因,但以下原因最为常见:

  • List item

    • 由于以下情况,表或索引扫描导致的高逻辑读取:
    • 过期统计信息
    • 缺少索引
    • 参数敏感计划 (PSP) 问题
    • 设计不佳的查询
  • 工作负荷增加
    可以使用以下步骤来解决 SQL Server 中 CPU 使用率过高的问题。

步骤 1:验证 SQL Server 是否导致 CPU 使用率过高

使用以下工具之一检查 SQL Server 进程是否确实导致 CPU 使用率过高:

  • 任务管理器:在“进程”选项卡上,检查“64 位版本的 SQL Server Windows NT”的“CPU”列的值是否接近 100%。
  • 性能和资源监视器 (perfmon)
    • 计数器:Process/%User Time, % Privileged Time
    • 实例:sqlservr
  • 可以使用以下 PowerShell 脚本在 60 秒的跨度内收集计数器数据:
 1 $serverName = $env:COMPUTERNAME
 2 $Counters = @(
 3     ("\\$serverName" + "\Process(sqlservr*)\% User Time"), ("\\$serverName" + "\Process(sqlservr*)\% Privileged Time")
 4 )
 5 Get-Counter -Counter $Counters -MaxSamples 30 | ForEach {
 6     $_.CounterSamples | ForEach {
 7         [pscustomobject]@{
 8             TimeStamp = $_.TimeStamp
 9             Path = $_.Path
10             Value = ([Math]::Round($_.CookedValue, 3))
11         }
12         Start-Sleep -s 2
13     }
14 }

 

如果 % User Time 始终大于 90%,则是 SQL Server 进程导致 CPU 使用率过高。 但是,如果 % Privileged time 始终大于 90%,则是防病毒软件、其他驱动程序或计算机上的其他操作系统组件导致 CPU 使用率过高。 应与系统管理员合作,分析此行为的根本原因。

步骤 2:确定影响 CPU 使用率的查询

如果 Sqlservr.exe 进程导致 CPU 使用率过高,则最常见的原因是执行表或索引扫描的 SQL Server 查询,其次是排序、哈希操作和循环 (嵌套循环运算符或 WHILE (T-SQL) ) 。 要了解查询当前在总 CPU 使用率中的占比,请运行以下语句:

 1 DECLARE @init_sum_cpu_time int,
 2         @utilizedCpuCount int 
 3 --get CPU count used by SQL Server
 4 SELECT @utilizedCpuCount = COUNT( * )
 5 FROM sys.dm_os_schedulers
 6 WHERE status = 'VISIBLE ONLINE' 
 7 --calculate the CPU usage by queries OVER a 5 sec interval 
 8 SELECT @init_sum_cpu_time = SUM(cpu_time)
 9 FROM sys.dm_exec_requests WAITFOR DELAY '00:00:05'SELECT CONVERT(DECIMAL(5,
10          2),
11          ((SUM(cpu_time) - @init_sum_cpu_time) / (@utilizedCpuCount * 5000.00)) * 100) AS [CPU FROM Queries AS Percent of Total CPU Capacity]
12 FROM sys.dm_exec_requests

若要确定当前负责高 CPU 活动的查询,请运行以下语句:

 1 SELECT TOP 10 s.session_id,
 2            r.status,
 3            r.cpu_time,
 4            r.logical_reads,
 5            r.reads,
 6            r.writes,
 7            r.total_elapsed_time / (1000 * 60) 'Elaps M',
 8            SUBSTRING(st.TEXT, (r.statement_start_offset / 2) + 1,
 9            ((CASE r.statement_end_offset
10                 WHEN -1 THEN DATALENGTH(st.TEXT)
11                 ELSE r.statement_end_offset
12             END - r.statement_start_offset) / 2) + 1) AS statement_text,
13            COALESCE(QUOTENAME(DB_NAME(st.dbid)) + N'.' + QUOTENAME(OBJECT_SCHEMA_NAME(st.objectid, st.dbid)) 
14            + N'.' + QUOTENAME(OBJECT_NAME(st.objectid, st.dbid)), '') AS command_text,
15            r.command,
16            s.login_name,
17            s.host_name,
18            s.program_name,
19            s.last_request_end_time,
20            s.login_time,
21            r.open_transaction_count
22 FROM sys.dm_exec_sessions AS s
23 JOIN sys.dm_exec_requests AS r ON r.session_id = s.session_id CROSS APPLY sys.Dm_exec_sql_text(r.sql_handle) AS st
24 WHERE r.session_id != @@SPID
25 ORDER BY r.cpu_time DESC

 

如果查询目前未驱动 CPU,可以运行以下语句来查找历史占用大量 CPU 的查询:

 1 SELECT TOP 10 st.text AS batch_text,
 2     SUBSTRING(st.TEXT, (qs.statement_start_offset / 2) + 1, ((CASE qs.statement_end_offset WHEN - 1 THEN DATALENGTH(st.TEXT) ELSE qs.statement_end_offset END - qs.statement_start_offset) / 2) + 1) AS statement_text,
 3     (qs.total_worker_time / 1000) / qs.execution_count AS avg_cpu_time_ms,
 4     (qs.total_elapsed_time / 1000) / qs.execution_count AS avg_elapsed_time_ms,
 5     qs.total_logical_reads / qs.execution_count AS avg_logical_reads,
 6     (qs.total_worker_time / 1000) AS cumulative_cpu_time_all_executions_ms,
 7     (qs.total_elapsed_time / 1000) AS cumulative_elapsed_time_all_executions_ms
 8 FROM sys.dm_exec_query_stats qs
 9 CROSS APPLY sys.dm_exec_sql_text(sql_handle) st
10 ORDER BY(qs.total_worker_time / qs.execution_count) DESC

步骤 3:更新统计信息

在确定 CPU 占用最高的查询后,请更新这些查询使用的表的“更新统计信息” 。 可以使用 sp_updatestats 系统存储过程更新当前数据库中所有用户定义表和内部表的统计信息。 例如:

1 exec sp_updatestats

备注
sp_updatestats系统存储过程针对当前数据库中的所有用户定义表和内部表运行UPDATE STATISTICS。 对于定期维护,请确保定期计划维护使统计信息保持最新。 使用“自适应索引碎片整理”等解决方案自动管理一个或多个数据库的索引碎片整理和统计信息更新。 此过程自动选择是根据索引的碎片级别和其他参数重新生成还是重新组织索引,并使用线性阈值更新统计信息。

如果 SQL Server 的 CPU 占用仍然过高,请前往下一步。

步骤 4:添加缺失索引

缺少索引可能导致运行速度较慢的查询和 CPU 使用率过高。 可以识别缺失的索引并创建这些索引,以改善这种性能影响。

  1. 运行以下查询以识别导致 CPU 使用率高且在查询计划中至少包含一个缺失索引的查询:
 1 -- Captures the Total CPU time spent by a query along with the query plan and total executions
 2 SELECT
 3     qs_cpu.total_worker_time / 1000 AS total_cpu_time_ms,
 4     q.[text],
 5     p.query_plan,
 6     qs_cpu.execution_count,
 7     q.dbid,
 8     q.objectid,
 9     q.encrypted AS text_encrypted
10 FROM
11     (SELECT TOP 500 qs.plan_handle,
12      qs.total_worker_time,
13      qs.execution_count FROM sys.dm_exec_query_stats qs ORDER BY qs.total_worker_time DESC) AS qs_cpu
14 CROSS APPLY sys.dm_exec_sql_text(plan_handle) AS q
15 CROSS APPLY sys.dm_exec_query_plan(plan_handle) p
16 WHERE p.query_plan.exist('declare namespace 
17         qplan = "http://schemas.microsoft.com/sqlserver/2004/07/showplan";
18         //qplan:MissingIndexes')=1

 

  1. 查看已标识查询的执行计划,并通过进行所需的更改来优化查询。 以下屏幕截图显示了一个示例,其中 SQL Server 将指出查询的缺失索引。 右键单击查询计划的“缺失索引”部分,然后选择“缺少索引详细信息”,在 SQL Server Management Studio 的另一个窗口中创建索引。在这里插入图片描述
  2. 使用以下查询检查是否缺少索引,并应用具有高改进度量值的任何建议索引。 从输出中具有最高 improvement_measure 值的前 5 或 10 条建议开始。 这些索引对性能有最显著的积极影响。 确定是否要应用这些索引,并确保对应用程序进行了性能测试。 然后,继续应用缺失索引建议,直到获得所需的应用程序性能结果。
 1 SELECT CONVERT(VARCHAR(30), GETDATE(), 126) AS runtime,
 2     mig.index_group_handle,
 3     mid.index_handle,
 4     CONVERT(DECIMAL(28, 1), migs.avg_total_user_cost * migs.avg_user_impact * (migs.user_seeks + migs.user_scans)) AS improvement_measure,
 5     'CREATE INDEX missing_index_' + CONVERT(VARCHAR, mig.index_group_handle) + '_' + CONVERT(VARCHAR, mid.index_handle) + ' ON ' + mid.statement + ' (' + ISNULL(mid.equality_columns,
 6         '') + CASE WHEN mid.equality_columns IS NOT NULL
 7 AND mid.inequality_columns IS NOT NULL THEN ','
 8 ELSE ''
 9 END + ISNULL(mid.inequality_columns,
10         '') + ')' + ISNULL(' INCLUDE (' + mid.included_columns + ')',
11         '') AS create_index_statement,
12     migs.*,
13     mid.database_id,
14     mid.[object_id]
15 FROM sys.dm_db_missing_index_groups mig
16 INNER JOIN sys.dm_db_missing_index_group_stats migs ON migs.group_handle = mig.index_group_handle
17 INNER JOIN sys.dm_db_missing_index_details mid ON mig.index_handle = mid.index_handle
18 WHERE CONVERT (DECIMAL (28, 1),
19                migs.avg_total_user_cost * migs.avg_user_impact * (migs.user_seeks + migs.user_scans)) > 10
20 ORDER BY migs.avg_total_user_cost * migs.avg_user_impact * (migs.user_seeks + migs.user_scans) DESC

步骤 5:调查并解决参数敏感问题

可以使用 DBCC FREEPROCCACHE 命令释放计划缓存,并检查这是否解决了 CPU 使用率过高的问题。 如果问题已修复,则表示是参数敏感问题(PSP,也称为“参数探查问题”)。

备注
使用不带参数的 DBCC FREEPROCCACHE 将从计划缓存中删除所有已编译的计划。 这将导致再次编译新的查询执行,从而导致每个新查询的持续时间一次性延长。 最佳方法是使用 DBCC FREEPROCCACHE ( plan_handle | sql_handle ) 来识别导致问题的查询,然后解决单个查询或有问题的查询。

要解决此参数敏感问题,请使用以下方法。 每种方法都有相应的利弊。

  • 使用 RECOMPILE 查询提示。 可以向步骤 2 中标识的一个或多个 CPU 过高查询添加 RECOMPILE 查询提示。 此提示将使编译 CPU 使用率略微增加,有助于在与每个查询执行的更佳性能之间达到平衡。 有关详细信息,请参阅参数和执行计划重用、 参数敏感度和 RECOMPILE 查询提示。

    下面是如何将此提示应用到查询的示例。

    1 SELECT * FROM Person.Person 
    2 WHERE LastName = 'Wood'
    3 OPTION (RECOMPILE)
  • 使用 OPTIMIZE FOR 查询提示,使用包含数据中大多数值的更典型的参数值覆盖实际参数值。 此选项需要充分了解最佳参数值和关联的计划特征。 下面是如何在查询中使用此提示的示例。

    1 DECLARE @LastName Name = 'Frintu'
    2 SELECT FirstName, LastName FROM Person.Person 
    3 WHERE LastName = @LastName
    4 OPTION (OPTIMIZE FOR (@LastName = 'Wood'))

     

  • 使用优化未知查询提示,使用密度向量平均值覆盖实际参数值。 也可以通过捕获本地变量中的传入参数值,然后使用谓词中的本地变量而不是使用参数本身来执行此操作。 对于此修复,平均密度可能足以提供可接受的性能。

  • 使用 DISABLE_PARAMETER_SNIFFING 查询提示,完全禁用参数探查。 下面是如何在查询中使用它的示例:

    1 SELECT * FROM Person.Address  
    2 WHERE City = 'SEATTLE' AND PostalCode = 98104
    3 OPTION (USE HINT ('DISABLE_PARAMETER_SNIFFING'))

     

  • 使用 KEEPFIXED PLAN 查询提示,阻止在缓存中重新编译。 此解决方法假定“足够好”的常见计划是已在缓存中的计划。 还可以禁用自动统计信息更新,以减少将好计划逐出并编译新的错误计划的可能性。

  • 将 DBCC FREEPROCCACHE 命令用作临时解决方案,直到应用程序代码修复为止。 可以使用 DBCC FREEPROCCACHE (plan_handle) 命令仅删除导致问题的计划。 例如,若要查找引用 AdventureWorks 中 Person.Person 表的查询计划,可以使用此查询查找查询句柄。 然后,可以使用查询结果第二列中生成的 DBCC FREEPROCCACHE (plan_handle),从缓存中释放特定查询计划。

    1 SELECT text, 'DBCC FREEPROCCACHE (0x' + CONVERT(VARCHAR (512), plan_handle, 2) + ')' AS dbcc_freeproc_command FROM sys.dm_exec_cached_plans
    2 CROSS APPLY sys.dm_exec_query_plan(plan_handle)
    3 CROSS APPLY sys.dm_exec_sql_text(plan_handle)
    4 WHERE text LIKE '%person.person%'

步骤 6:调查并解决 SARGability 问题

当 SQL Server 引擎可以使用索引查找来加快查询的执行速度时,查询中的谓词将被视为 SARGable (Search ARGument-able)。 许多查询设计会阻止 SARGability,并导致表或索引扫描和 CPU 使用率过高。 请考虑 AdventureWorks 数据库的以下查询,其中必须检索每个 ProductNumber 并向其应用 SUBSTRING() 函数,然后再将其与字符串文本值进行比较。 如你所见,必须先提取表的所有行,然后应用函数,然后才能进行比较。 从表中提取所有行意味着表或索引扫描,这会导致 CPU 使用率较高。

1 SELECT ProductID, Name, ProductNumber
2 FROM [Production].[Product]
3 WHERE SUBSTRING(ProductNumber, 0, 4) =  'HN-'

 

对搜索谓词中的列应用任何函数或计算通常会使查询非 sargable,并导致 CPU 消耗较高。 解决方案通常涉及以创造性的方式重写查询,使其 SARGable。 此示例的一个可能解决方案是重写,其中从查询谓词中删除函数,搜索另一列,并获得相同的结果:

1 SELECT ProductID, Name, ProductNumber
2 FROM [Production].[Product]
3 WHERE Name LIKE  'Hex%'

 

下面是另一个示例,销售经理可能希望为大额订单提供 10% 的销售佣金,并希望查看哪些订单的佣金将超过 300 美元。 这是合乎逻辑的,但非 sargable 的方法。

1 SELECT DISTINCT SalesOrderID, UnitPrice, UnitPrice * 0.10 [10% Commission]
2 FROM [Sales].[SalesOrderDetail]
3 WHERE UnitPrice * 0.10 > 300

下面是一个可能不太直观,但以 SARGable 重写查询的方法,其中计算将移动到谓词的另一边。

1 SELECT DISTINCT SalesOrderID, UnitPrice, UnitPrice * 0.10 [10% Commission]
2 FROM [Sales].[SalesOrderDetail]
3 WHERE UnitPrice > 300/0.10

SARGability 不仅适用于 WHERE 子句,也适用于 JOINsHAVINGGROUP BYORDER BY 子句。 查询中频繁出现的阻止 SARGability 涉及导致列扫描的子句 WHERE 或 JOIN 中使用的 CONVERT()CAST()ISNULL()COALESCE() 函数。 在数据类型转换情况下(CONVERT 或 CAST),解决方案可能会确保你正在比较相同的数据类型。 下面是一个示例,其中 T1.ProdID 列显式转换为 JOIN 中的 INT 数据类型。 此转换会阻止在联接列上使用索引。 当数据类型不同且 SQL Server 转换其中一种类型以执行联接的隐式转换时,也会出现相同的问题。

1 SELECT T1.ProdID, T1.ProdDesc
2 FROM T1 JOIN T2 
3 ON CONVERT(int, T1.ProdID) = T2.ProductID
4 WHERE t2.ProductID BETWEEN 200 AND 300

为了避免对表进行 T1 扫描,可以在正确规划和设计后更改 ProdID 列的基础数据类型,然后联接这两列,而无需使用转换函数 ON T1.ProdID = T2.ProductID

另一种解决方案是在 T1 中创建一个使用相同 CONVERT() 函数的计算列,然后在其上创建索引。 这将允许查询优化器使用该索引,而无需更改查询。

1 ALTER TABLE dbo.T1  ADD IntProdID AS CONVERT (INT, ProdID);
2 CREATE INDEX IndProdID_int ON dbo.T1 (IntProdID);

步骤 7:禁用重度跟踪

检查 SQL 跟踪或 XEvent 跟踪,这些跟踪会影响 SQL Server 性能并导致 CPU 使用率过高。 例如,如果跟踪重度 SQL Server 活动,使用以下事件可能会导致 CPU 使用率过高:

  • 查询计划 XML 事件 (query_plan_profilequery_post_compilation_showplanquery_post_execution_plan_profilequery_post_execution_showplanquery_pre_execution_showplan)
  • 语句级事件 (sql_statement_completedsql_statement_startingsp_statement_startingsp_statement_completed)
  • 登录和注销事件 (loginprocess_login_finishlogin_eventlogout)
  • 锁定事件 (lock_acquiredlock_cancellock_released)
  • 等待事件 (wait_infowait_info_external)
  • SQL 审核事件(取决于该组中审核的组和 SQL Server 活动)

运行以下查询以确定活动的 XEvent 或 Server 跟踪:

 1 PRINT '--Profiler trace summary--'
 2 SELECT traceid, property, CONVERT(VARCHAR(1024), value) AS value FROM::fn_trace_getinfo(
 3     default)
 4 GO
 5 PRINT '--Trace event details--'
 6 SELECT trace_id,
 7     status,
 8     CASE WHEN row_number = 1 THEN path ELSE NULL end AS path,
 9     CASE WHEN row_number = 1 THEN max_size ELSE NULL end AS max_size,
10     CASE WHEN row_number = 1 THEN start_time ELSE NULL end AS start_time,
11     CASE WHEN row_number = 1 THEN stop_time ELSE NULL end AS stop_time,
12     max_files,
13     is_rowset,
14     is_rollover,
15     is_shutdown,
16     is_default,
17     buffer_count,
18     buffer_size,
19     last_event_time,
20     event_count,
21     trace_event_id,
22     trace_event_name,
23     trace_column_id,
24     trace_column_name,
25     expensive_event
26 FROM
27     (SELECT t.id AS trace_id,
28      row_number() over(PARTITION BY t.id order by te.trace_event_id, tc.trace_column_id) AS row_number,
29      t.status,
30      t.path,
31      t.max_size,
32      t.start_time,
33      t.stop_time,
34      t.max_files,
35      t.is_rowset,
36      t.is_rollover,
37      t.is_shutdown,
38      t.is_default,
39      t.buffer_count,
40      t.buffer_size,
41      t.last_event_time,
42      t.event_count,
43      te.trace_event_id,
44      te.name AS trace_event_name,
45      tc.trace_column_id,
46      tc.name AS trace_column_name,
47      CASE WHEN te.trace_event_id in (23, 24, 40, 41, 44, 45, 51, 52, 54, 68, 96, 97, 98, 113, 114, 122, 146, 180) THEN CAST(1 as bit) ELSE CAST(0 AS BIT) END AS expensive_event FROM sys.traces t CROSS APPLY::fn_trace_geteventinfo(t.id) AS e JOIN sys.trace_events te ON te.trace_event_id = e.eventid JOIN sys.trace_columns tc ON e.columnid = trace_column_id) AS x
48 GO
49 PRINT '--XEvent Session Details--'
50 SELECT sess.NAME 'session_name', event_name, xe_event_name, trace_event_id,
51     CASE WHEN xemap.trace_event_id IN(23, 24, 40, 41, 44, 45, 51, 52, 54, 68, 96, 97, 98, 113, 114, 122, 146, 180) 
52     THEN Cast(1 AS BIT)
53 ELSE Cast(0 AS BIT)
54 END AS expensive_event
55 FROM sys.dm_xe_sessions sess
56 JOIN sys.dm_xe_session_events evt
57 ON sess.address = evt.event_session_address
58 INNER JOIN sys.trace_xe_event_map xemap
59 ON evt.event_name = xemap.xe_event_name
60 GO

 

标签:qs,trace,SQL,CPU,Server,time,查询,event
From: https://www.cnblogs.com/Thenext/p/16802320.html

相关文章

  • YOLOv5】LabVIEW+OpenVINO让你的YOLOv5在CPU上飞起来
     前言上一篇博客给大家介绍了使用opencv加载YOLOv5的onnx模型,但我们发现使用CPU进行推理检测确实有些慢,那难道在CPU上就不能愉快地进行物体识别了吗?当然可以啦,这不LabVI......
  • Linux安装mysql之路
    1、登录机器(1)链接机器ssh+ip,回车ssh192.168.1.1(2)输入密码,回车2、上传文件由于作者这边是内网,安全原因不能暴露具体内容,大致是利用工具将文件传到的指定目录中(非内网情况可......
  • TP5 where数组查询(模糊查询)(有多个查询条件) whensql判断条件:TP6 条件查询 sql判断
    sql判断条件:TP6条件查询sql判断条件_php菜鸟技术天地Db::name('user')->when($sex==1&&$type=1&&!empyt($score) ,function($query){Db::name('user')->when($s......
  • MySQL---目录结构
    MySQL8目录结构查找当前系统内MySQL相关内容find/-namemysqlMySQL数据库文件存放路径MySQL指令路径MySQL配置文件路径数据库和文件系统的关系......
  • docker 安装mysql主从模式
    1.创建主数据库容器dockerrun-p3306:3306--namemysql-master-v/zgbo/mysql_m/log:/var/log/mysql-v/zgbo/mysql_m/data:/var/lib/mysql-v/zgbo/mysql_m/conf:......
  • 0 基础晋级 Serverless 高手课 — 初识 Serverless(上)
            应用-无服务器  2017-2006函数即服务类似云计算(Serverless)  faas函数服务+后端数据库账号服务   弹性,按量       服务器,客户端的终......
  • 像 Mysql 和 MongoDB 这种大型软件在设计上都是精益求精的,它们为什么选择B树,B+树这些
    为什么MongoDB(索引)使用B-树而Mysql使用B+树?B树与B+树,其比较大的特点是:B树对于特定记录的查询,其时间复杂度更低。而B+树对于范围查询则更加方便,另外B+树相对......
  • 京东云 TiDB SQL 优化的最佳实践
    京东云TiDBSQL层的背景介绍从总体上概括TiDB和MySQL兼容策略,如下表:SQL层的架构用户的SQL请求会直接或者通过LoadBalancer发送到京东云TiDBServer,TiDBServer会......
  • Linux 必掌握的 SQL 命令
    数据库和SQL在本系列教程中,目前我们使用平面文本文件来存储数据。平面文本文件可能适合相对较少的数据,但它们对存储大量数据或查询该数据没有多大帮助。多年来,为该目的开发......
  • mysql sql优化相关[更新中]
    1.慢sql查询。select*frominformation_schema.processlistwherecommandnotin('Sleep')andusernotin('mydba','event_scheduler','repl','binlogbak','syst......