原文链接:
http://click.aliyun.com/m/26465/
摘要: # 背景引入 执行计划缓存是SQL Server内存管理中非常重要的特性,这篇文章是巧用执行计划缓存系列文章之四,探讨什么是Key Lookup操作,如何从执行计划缓存中发现Key Lookup问题,以及如何解决这个问题。 # 什么是Key Lookup Key Lookup操作是指执行计划通过表的索引查找字段列的书签查找方式。Key Lookup发生在当查询语句使用Index Se
背景引入
执行计划缓存是SQL Server内存管理中非常重要的特性,这篇文章是巧用执行计划缓存系列文章之四,探讨什么是Key Lookup操作,如何从执行计划缓存中发现Key Lookup问题,以及如何解决这个问题。
什么是Key Lookup
Key Lookup操作是指执行计划通过表的索引查找字段列的书签查找方式。Key Lookup发生在当查询语句使用Index Seek(或者Index Scan)的同时,又需要查找Index中没有完全包含的额外字段列,这时SQL Server必须回过头来获取额外的字段列的值。通常情况下Key Lookup操作是通过表聚集索引来查找字段列的值,因此,可能会导致昂贵的查询性能开销,在性能优化过程中,需要引起我们足够的重视。
如何发现Key Lookup
在性能优化过程中,执行计划中的Key Lookup操作是我们优化的重点之一,那么我们如何发现Key Lookup操作呢?本文介绍两种方法:
执行计划图形展示
执行计划缓存中查找
执行计划图形展示
SQL Server客户端工具SSMS可以图形化方式直观的展示执行计划图形,我们可以通过这个直观的做图来发现Key Lookup操作。比如,我们有如下查询语句,在执行之前,我们打开实际执行计划采集开关(可以使用快捷键CTRL + M)。
USE [AdventureWorks2008R2];
GO
SELECT
NationalIDNumber,
HireDate,
MaritalStatus
FROM HumanResources.Employee WITH(NOLOCK)
WHERE NationalIDNumber = N'519899904';
GO
语句执行完毕后,会有Execution Plan窗口,从这里我们可以很轻易的看到Key Lookup事件操作,将鼠标悬停在Key Lookup事件上,会有弹窗展示更为详细的信息。详情参见如下截图,我们可以看到Key Lookup的性能开销为50%,占了整个查询语句性能开销的一半。开销算是很高的了。
01.png
执行计划缓存中查找
我们除了可以通过执行计划图形展示的方式来发现Key Lookup操作以外,我们还可以查找执行计划缓存来让Key Lookup操作无所遁形。比如,下面截图中信息是刚才执行语句的执行计划缓存中Key Lookup操作的XML节点。
02.png
所以,我们只需要搜索执行计划缓存,就可以找出哪些执行过的语句使用了Key Lookup操作,就可以针对性的进行性能优化。查找执行计划缓存的方法如下:
;WITH XMLNAMESPACES (DEFAULT 'http://schemas.microsoft.com/sqlserver/2004/07/showplan')
SELECT
--T.C.query('.')
database_name = T.C.value('(IndexScan/Object/@Database)[1]','sysname')
,Schema_name = T.C.value('(IndexScan/Object/@Schema)[1]','sysname')
,Table_name = T.C.value('(IndexScan/Object/@Table)[1]','sysname')
,Index_name = T.C.value('(IndexScan/Object/@Index)[1]','sysname')
,index_type = T.C.value('(IndexScan/Object/@IndexKind)[1]','sysname')
,sql_text = T.C.value('(../../../../@StatementText)[1]','nvarchar(max)')
,output_columns =STUFF(( SELECT DISTINCT ', ' + cr.n.value('(@Column)[1]', 'sysname')
FROM T.C.nodes('../../OutputList/ColumnReference') as cr(n)
FOR XML PATH('')
), 1, 2, '' )
,seek_columns =STUFF(( SELECT DISTINCT ', ' + cr.n.value('(@Column)[1]', 'sysname')
FROM T.C.nodes('IndexScan/SeekPredicates/SeekPredicateNew/SeekKeys/Prefix/RangeColumns/ColumnReference') as cr(n)
FOR XML PATH('')
), 1, 2, '' )
,Predicate = T.C.value('(IndexScan/SeekPredicates/SeekPredicateNew/SeekKeys/Prefix/RangeExpressions/ScalarOperator/@ScalarString)[1]', 'nvarchar(max)')
--,cp.usecounts
--,qp.query_plan
FROM sys.dm_exec_cached_plans AS cp
CROSS APPLY sys.dm_exec_query_plan(cp.plan_handle) as qp
CROSS APPLY qp.query_plan.nodes('/ShowPlanXML/BatchSequence/Batch/Statements/StmtSimple/QueryPlan/RelOp/NestedLoops/RelOp[IndexScan[@Lookup="1"] and IndexScan/Object[@Schema!="[sys]"]]') as T(C)
WHERE T.C.exist('../RelOp[IndexScan[@Lookup="1"] and IndexScan/Object[@Schema!="[sys]"]]') = 1
比如,刚才的执行语句就被抓出来了,展示如下截图:
03.png
解决Key Lookup问题
从以上的分析,我们知道了Key Lookup对性能的影响,以及如何发现Key Lookup操作的语句,接下来的任务就是如何解决Key Lookup问题了。通常我们有如下方法:
删除不必要字段列
创建覆盖索引
删除不必要的字段列
这个解决方法很好理解,因为使用Key Lookup操作的目的就是为了查找SELECT字句中的字段列,如果我们将业务不必要,或者可要可不需要的字段列删除的话,很可能SQL Server就不会再走Key Lookup操作了,因此也就解决了这个问题。一个非常典型的场景是,很多开发人员喜欢使用SELECT * FROM操作。最好的方式是显示罗列所有业务必须要使用的字段名字,而不是一股脑儿全部字段都查询出来。
创建覆盖索引
如果万一,SELECT中的所有字段都是你业务所必须的,无法删除的话,我们可以考试使用覆盖索引来解决Key Lookup问题,即创建索引的时候,使用INCLUDE字句将SELECT后的字段包含在其中(排除在ON字句中字段,比如这里的NationalIDNumber字段列)。比如,上面的查询语句,我们可以创建覆盖索引:
USE [AdventureWorks2008R2];
GO
CREATE NONCLUSTERED INDEX IX_NationalIDNumber_@HireDate_@MaritalStatus
ON HumanResources.Employee (NationalIDNumber)
INCLUDE(HireDate, MaritalStatus)
WITH(FILLFACTOR = 90, ONLINE = ON)
执行完毕后,再次执行该语句,查看执行计划,仅一个Index Seek,没有Key Lookup操作,说明这个问题已经得到了解决。详情参见以下截图:
04.png
友情提醒
如果使用SSMS查看执行SQL语句的实际执行计划,XML 中IndexScan节点的Lookup属性值为True,如下展示:
...
<IndexScan Lookup="true" Ordered="true" ScanDirection="FORWARD" ForcedIndex="false" ForceSeek="false" ForceScan="false" NoExpandHint="false">
...
而从执行计划缓存中获取到的IndexScan节点中Lookup属性值为1。如下展示:
...
<IndexScan Lookup="1" Ordered="1" ScanDirection="FORWARD" ForcedIndex="0" ForceSeek="0" ForceScan="0" NoExpandHint="0">
...
因此,我们在分析执行计划缓存中的Key Lookup操作的时候,需要检查Lookup的值是否是1,而不是检查它是否为true。以下是SSMS执行计划中的XML节点,Lookup属性值为true,而在“执行计划缓存中查找”章节中的截图,我们知道Lookup属性值为1。
05.png
最后总结
这篇文章讨论了在性能优化过程中经常要遇到的一个需要优化的点叫Key Lookup操作,以及我们如何发现Key Lookup,最后谈到了两种解决Key Lookup问题的方法。
引用文章
Finding Key Lookups inside the Plan Cache
如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:yqgroup@service.aliyun.com 进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
原文链接:
http://click.aliyun.com/m/26465/
分享到:
相关推荐
根据提供的文件信息,我们可以推断出这是一份关于Yamaha RX-V340/RX-V340RDS/HT-R5630/HT-R5630RDS/DSP-AX340等型号音频接收器的服务手册。这份手册主要面向授权零售商及其服务人员。接下来将对这些型号的产品进行...
阿里云云栖大会分享PPT中提到了如何优化阿里云*** Server的CPU使用率。具体来说,主要分享内容包括:数据类型转换、非SARG查询、统计信息维护、参数嗅探问题、以及TOP SQL分析。 数据类型转换在数据库优化中是一个...
标签:aws-rds-1.8.1-javadoc.jar,aws,rds,1.8.1,javadoc,jar包下载,依赖包
* 版本:指数据库版本,目前 RDS 支持的数据库版本包括 MySQL 5.5/5.6/5.7、SQL Server 2008 R2/2012、PostgreSQL 9.4 和 PPAS 9.3 目标读者 * 首次购买 RDS 实例的用户 * 新建实例后需要对其进行基本设置的用户 *...
Amazon RDS是一种完全托管的关系数据库服务,支持多种数据库引擎,如MySQL、PostgreSQL、Oracle、SQL Server等。通过boto3,开发者能够轻松地创建、配置、管理和操作RDS实例,进行数据查询、备份、恢复等操作。 ...
SQL Server磁盘空间清理及过引重建
资源分类:Python库 所属语言:Python 资源全名:aws_cdk.aws_rds-1.45.0-py3-none-any.whl 资源来源:官方 安装方法:https://lanzao.blog.csdn.net/article/details/101784059
《PyPI官网下载:mypy-boto3-rds-data-1.17.105.tar.gz——Python库解析》 PyPI(Python Package Index)是Python开发者们分享和获取Python软件包的主要平台,它是Python生态系统的核心组成部分。本文将详细探讨...
Amazon RDS Data Service允许开发者直接在数据库实例上执行SQL查询,而无需创建额外的数据库连接。它支持多种数据库引擎,如MySQL、PostgreSQL、Oracle等,提供了强大的事务处理能力和数据转换功能。mypy-boto3-rds-...
描述中提到,“AWS RDS SQL Server”和“这个terraform模块创建一个SQL Server RDS实例和关联的资源”,这表明该模块不仅会创建RDS实例,还会处理与之相关的其他组件,如安全组、参数组、备份策略等,这些都是在AWS...
1. **快速解析**:RDS JSON模块使用高效的算法来解析JSON字符串,避免了将JSON数据转发到其他进程或服务的开销。 2. **数据缓存**:解析后的JSON数据可以被缓存在Nginx内存中,加快后续请求的响应速度。 3. **自定义...
标签:aws-rds-1.6.2-incubating-javadoc.jar,aws,rds,1.6.2,incubating,javadoc,jar包下载,依赖包
标签:aws-rds-1.6.1-incubating-sources.jar,aws,rds,1.6.1,incubating,sources,jar包下载,依赖包
标签:aws-rds-1.6.1-incubating-tests.jar,aws,rds,1.6.1,incubating,tests,jar包下载,依赖包
标签:aws-rds-1.6.2-incubating-sources.jar,aws,rds,1.6.2,incubating,sources,jar包下载,依赖包
标签:aws-rds-1.6.2-incubating-tests.jar,aws,rds,1.6.2,incubating,tests,jar包下载,依赖包
标题中的“PyPI 官网下载 | mypy-boto3-rds-data-1.16.11.0.tar.gz”表明这是一个从Python Package Index (PyPI) 下载的压缩包,具体是mypy-boto3-rds-data的1.16.11.0版本。PyPI是Python开发者发布和获取开源软件包...
标签:aws-rds-1.6.1-incubating-javadoc.jar,aws,rds,1.6.1,incubating,javadoc,jar包下载,依赖包
RDS-PP技术文档主要介绍了一种名为RDS-PP的电厂标识系统,这是由VGB组织发布的面向电力行业的新型电厂和相关组件的标识系统。RDS-PP是现有KKS标识系统的现代化版本,主要改进和扩展了对电力厂组件进行标识的要求。 ...