设为首页 收藏本站
查看: 790|回复: 0

[经验分享] SQL Server-聚焦过滤索引提高查询性能

[复制链接]

尚未签到

发表于 2018-10-20 10:15:45 | 显示全部楼层 |阅读模式
过滤索引,在查询条件上创建非聚集索引
  过滤索引是SQL 2008的新特性,被应用在表中的部分行,所以利用过滤索引能够提高查询,相对于全表扫描它能减少索引维护和索引存储的成本。当我们在索引上应用WHERE条件时就是过滤索引。也就是满足如下格式:
CREATE NONCLUSTERED INDEX ON  ()  
WHERE ;
  
GO
  下面我们来看一个简单的查询

USE AdventureWorks2012  
GO
  

  
SELECT SalesOrderDetailID, UnitPrice
  
FROM Sales.SalesOrderDetail
  
WHERE UnitPrice > 2000GO

  上述列中未建立任何索引,当然除了SalesOrderDetailID默认创建的聚集索引,这种情况下我们能够猜想到其执行的查询计划必然是主键创建的聚集索引扫描,如下

  上述我们已经说过此时未在查询条件上创建索引,所以此时必然走的是主键创建的聚集索引,接下来我们首先在UnitPrice列上创建非聚集索引来提高查询性能,
CREATE NONCLUSTERED INDEX idx_SalesOrderDetail_UnitPrice  
ON Sales.SalesOrderDetail(UnitPrice)
  此时我们再来比较二者查询开销

USE AdventureWorks2012  
GO
  

  
DBCC FREEPROCCACHE
  
DBCC DROPCLEANBUFFERS
  

  
SELECT SalesOrderDetailID, UnitPrice
  
FROM AdventureWorks2012.Sales.SalesOrderDetail WITH(INDEX([PK_SalesOrderDetail_SalesOrderID_SalesOrderDetailID]))
  
WHERE UnitPrice > 2000GO
  

  

  
SELECT SalesOrderDetailID, UnitPrice
  
FROM  Sales.SalesOrderDetail WITH(INDEX([idx_SalesOrderDetail_UnitPrice]))
  
WHERE UnitPrice > 2000


  此时在查询条件上建立了非聚集索引之后,查询开销提升的非常明显,提升达到了90%以上,因为非聚集索引也会引用了主键创建的聚集索引,所以这个时候不会导致Bookmark Lookup或者Key Lookup查找。接下来我们我们再添加一个带有条件的非聚集索引即过滤索引
CREATE NONCLUSTERED INDEX idxwhere_SalesOrderDetail_UnitPrice  
ON Sales.SalesOrderDetail(UnitPrice)
  
WHERE UnitPrice > 1000
  此时我们再来看看创建了过滤索引之后和之前非聚集索引性能开销差异:

USE AdventureWorks2012  
GO
  

  
DBCC FREEPROCCACHE
  
DBCC DROPCLEANBUFFERS
  

  
SELECT SalesOrderDetailID, UnitPrice
  
FROM AdventureWorks2012.Sales.SalesOrderDetail WITH(INDEX([idx_SalesOrderDetail_UnitPrice]))
  
WHERE UnitPrice > 2000
  
SELECT SalesOrderDetailID, UnitPrice
  
FROM  Sales.SalesOrderDetail WITH(INDEX([idxwhere_SalesOrderDetail_UnitPrice]))
  
WHERE UnitPrice > 2000


  此时我们知道创建的非聚集过滤索引与传统创建的非聚集索引相比,我们的查询接近减少了一半。
唯一过滤索引
  唯一过滤索引对于所有列必须唯一且不为空(只允许一个NULL存在)也是非常好的解决方案,所以此时在创建唯一过滤索引时需要将NULL值除外,比如如下:
CREATE UNIQUE NONCLUSTERED INDEX uq_fix_Customers_Email  
ON Customers(Email)
  
WHERE Email IS NOT NULL
  
GO
过滤索引结合INCLUDE
  当我们再添加一个额外列时,使用默认主键创建的聚集索引时,此时会走聚集索引扫描,然后我们在查询条件上创建一个过滤索引,我们强制使用这个过滤索引时,此时由于添加额外列,会导致需要返回到基表中再去获取数据,所以也就造成了Key Lookup查找,如下:

USE AdventureWorks2012  
GO
  

  
SELECT SalesOrderDetailID, UnitPrice, UnitPriceDiscountFROM Sales.SalesOrderDetail
  
WHERE UnitPrice > 2000GO


  此时我们需要用INCLUDE来包含额外列。
CREATE NONCLUSTERED INDEX [idx_SalesOrderDetail_UnitPrice] ON Sales.SalesOrderDetail(UnitPrice) INCLUDE(UnitPriceDiscount)  我们再创建一个过滤索引同时包括额外列
CREATE NONCLUSTERED INDEX [idxwhere_SalesOrderDetail_UnitPrice] ON Sales.SalesOrderDetail(UnitPrice) INCLUDE(UnitPriceDiscount)  
WHERE UnitPrice > 2000
  接下来再来执行比较添加过滤索引和未添加过滤索引同时都包括了额外列的性能查询差异。

SELECT SalesOrderDetailID, UnitPrice, UnitPriceDiscount  
FROM AdventureWorks2012.Sales.SalesOrderDetail WITH(INDEX([idx_SalesOrderDetail_UnitPrice]))
  
WHERE UnitPrice > 2000
  
SELECT SalesOrderDetailID, UnitPrice, UnitPriceDiscount
  
FROM  Sales.SalesOrderDetail WITH(INDEX([idxwhere_SalesOrderDetail_UnitPrice]))
  
WHERE UnitPrice > 2000


  此时性能用INCLUDE来包含额外列性能也得到了一定的改善。
过滤索引,在主键上创建非聚集索引(2)
  在第一个案列中,我们可以直接在查询列上创建非聚集索引,因为其类型是数字类型,要是查询条件是字符类型呢?首选现在我们先创建一个测试表

USE TSQL2012  
GO
  

  
CREATE TABLE dbo.TestData
  
(
  
    RowID       integer IDENTITY NOT NULL,
  
    SomeValue   VARCHAR(max) NOT NULL,
  
    StartDate   date NOT NULL,
  
    CONSTRAINT PK_Data_RowID
  
        PRIMARY KEY CLUSTERED (RowID)
  
);

  添加10万条测试数据

USE TSQL2012  
GO
  

  
INSERT dbo.TestData WITH (TABLOCKX)
  
    (SomeValue, StartDate)
  
SELECT
  
    CAST(N.n AS VARCHAR(max)) + 'JeffckyWang',
  
    DATEADD(DAY, (N.n - 1) % 31, '20140101')
  
FROM dbo.Nums AS N
  
WHERE
  
    N.n >= 1
  
    AND N.n < 100001;

  如果我们需要获取表TestData中SomeValue = 'JeffckyWang',此时我们想要在SomeValue上创建一个非聚集索引然后进行过滤,如下

USE TSQL2012  
GO
  

  
CREATE NONCLUSTERED INDEX idx_noncls_somevalue
  
ON dbo.TestData(SomeValue)
  
WHERE SomeValue = 'JeffckyWang'


更新
  SQL Server对创建索引大小有限制,最大是900字节,上述直接写的VARCHAR(MAX),所以会出错,切记,切记。
  此时我们在主键上创建非聚集索引,我们在主键RowID上创建一个过滤索引且SomeValue = 'JeffckyWang',然后返回数据,如下:
CREATE NONCLUSTERED INDEX idxwhere_noncls_somevalue  
ON dbo.TestData(RowID)
  
WHERE SomeValue = 'JeffckyWang'
  下面我们来对比建立过滤索引前后查询计划结果:

USE TSQL2012  
GO
  

  
SELECT RowID, SomeValue, StartDate
  
FROM dbo.TestData WITH(INDEX([idx_pk_rowid]))
  
WHERE SomeValue = 'JeffckyWang'SELECT RowID, SomeValue, StartDate
  
FROM dbo.TestData WITH(INDEX([idxwhere_noncls_somevalue]))
  
WHERE SomeValue = 'JeffckyWang'


  然后结合之前所学,移除Key Lookup,对创建的过滤索引进行INCLUDE。
CREATE NONCLUSTERED INDEX [idxwhere_noncls_somevalue] ON dbo.TestData(RowID) INCLUDE(SomeValue,StartDate)  
WHERE SomeValue = 'JeffckyWang'

  从这里看出,无论是对查询条件创建过滤索引还是对主键创建过滤索引,我们都可以通过结合之前所学来提高查询性能。
  我们从开头就一直在讲创建过滤索引,那么创建过滤索引优点的条件到底是什么?
  (1)只能通过非聚集索引进行创建。
  (2)如果在视图上创建过滤索引,此视图必须是持久化视图。
  (3)不能在全文索引上创建过滤索引。
过滤索引的优点
  (1)减少索引维护成本:对于增、删、改等操作不会耗费太多的成本,因为一个过滤索引的重建不需要耗时太多时间。
  (2)减少存储成本:过滤索引的存储占用空间很小。
  (3)更精确的统计:通过在WHERE条件上创建过滤索引比全表统计结果更加精确。
  (4)优化查询性能:通过查询计划可以看出其高效性。
  讲到这里为止,一直陈述的是过滤索引的好处和优点,已经将其捧上天了,其实其缺点也是显而易见。
过滤索引缺点
  最大的缺点则是查询条件的限制。其查询条件仅限于

::=  
     [ AND  ]
  

  
::=
  
     |
  

  
::=
  
        column_name IN (constant ,...n)

  过滤条件仅限于AND、|、IN。比较条件仅限于 { IS | IS NOT | = |  | != | > | >= | !> | < | = '2008-01-01' AND ModifiedDate  1000
  如果定义的是变量,利用变量来进行比较会如何呢?首先我们创建一个过滤索引
CREATE NONCLUSTERED INDEX idx_SalesOrderDetail_ProductID  
ON Sales.SalesOrderDetail (ProductID)
  
WHERE ProductID = 870
  利用变量来和查询条件比较,强制使用过滤索引(默认情况下走聚集索引)

USE AdventureWorks2012  
GO
  

  
DECLARE @ProductID INT
  
SET @ProductID = 870  SELECT ProductID
  
FROM Sales.SalesOrderDetail WITH(INDEX([idx_SalesOrderDetail_ProductID]))
  
WHERE ProductID = @ProductID


  查看查询执行计划结果却出错了,此时我们需要添加OPTION重新编译,如下:

USE AdventureWorks2012  
GO
  

  
DECLARE @ProductID INT
  
SET @ProductID = 870  SELECT ProductID
  
FROM Sales.SalesOrderDetail
  
WHERE ProductID = @ProductIDOPTION(RECOMPILE)


  上述利用变量来查询最后通过OPTION重新编译在SQL Server 2012中测试好使,至于其他版本未知,参考资料【The Pains of Filtered Indexes】。



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-623951-1-1.html 上篇帖子: SQL Server-聚焦IN VS EXISTS VS JOIN性能分析 下篇帖子: SQL 数据库T-SQL语句查询
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表