设为首页 收藏本站
查看: 1334|回复: 0

[经验分享] 记一次sql server 性能调优,查询从20秒至2秒

[复制链接]

尚未签到

发表于 2017-12-13 16:35:13 | 显示全部楼层 |阅读模式
一、需求
  需求很简单,就是需要查询一个报表,只有1个表,数据量大约60万左右,但是中间有些逻辑。
  先说明一下服务器配置情况:1核CPU、2GB内存、机械硬盘、Sqlserver 2008 R2、Windows Server2008 R2 SP1和阿里云的服务器,简单说就是阿里云最差的服务器。

1、原始表结构
DSC0000.png

  非常简单的一张表,这次不讨论数据冗余和表字段的设计,如是否可以把Project和Baojian提出成一个表等等,这个是原始表结构,这个目前是没有办法改变的。

2、查询的sql语句为
  

select *from(  

select *,ROW_NUMBER() OVER (ORDER BY sc desc) as rank  

from(  

select *,  

case when ( 40-(a.p*(case when a.p > 0 then 1 else -0.5 end)))<=30  
then 30
  
else ( 40-(a.p*(case when a.p > 0 then 1 else -0.5 end)))
  
end as sc   
  
from (
  
select * from (
  
select a.ProjectNumber, a.ProjectName, a.BaojianNumber, a.BaojianName, a.ToubiaoPerson,
  
sum(UnitPrice) as sumPrice,
  
b.price as avgPrice,
  
((sum(UnitPrice)-b.price)/nullif(b.price,0)*100) as p,
  
sum(case when UnitPrice>b.price then b.price else UnitPrice end )as pprice,
  
sum(case when UnitPrice>MaxPrice then 1 else 0 end ) as countChao
  
from ToubiaoDetailTest1 a
  
join (
  
select ProjectNumber, ProjectName, BaojianNumber, BaojianName, avg(price) as price
  
from(
  
select * from(
  
select ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson,
  
SUM(UnitPrice) as price,
  
SUM(case when UnitPrice>MaxPrice then 1 else 0 end ) as countChao
  
from ToubiaoDetailTest1  
  
group BY ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson
  
) tt
  
where tt.countChao = 0
  
) t
  
group by ProjectNumber, ProjectName, BaojianNumber, BaojianName
  
) b
  
on a.ProjectNumber=b.ProjectNumber and a.ProjectName=b.ProjectName and a.BaojianNumber=b.BaojianNumber and a.BaojianName=b.BaojianName
  
group by a.BaojianNumber, a.BaojianName, a.ProjectNumber, a.ProjectName, a.ToubiaoPerson, b.price   
  
) tt
  
where tt.countChao=0
  
) a  
  
) b
  
) t   
  
order by rank
  

  此段sql语句主要的功能是:
  1、根据ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson分组,查询所有数据的sum(UnitPrice)
  其中UnitPrice>MaxPrice的判断是为了逻辑,如果有一条数据满足,则此分组所有的数据不查询。
  2、根据ProjectNumber, ProjectName, BaojianNumber, BaojianName 分组,查询所有数据的avg(price),以上两步主要就是为了查询根据ProjectNumber, ProjectName, BaojianNumber, BaojianName分组的avg(price)值。
  3、然后根据逻辑获取相应的值、分数和按照分数排序分页等等操作。

二、性能调优
  在未做任何优化之前,查询一次的时间大约为20秒左右。

1、建立索引
  根据sql语句我们可以知道,会根据5个字段(ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson)进行分组聚合,所以尝试添加非聚集索引idx_calc。
  在索引键列添加ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson。如图:
DSC0001.png

  然后执行查询sql语句,发现执行时间已经减半了,只要10610毫秒

2、索引包含列
  分析查询sql可以得知,我们需要计算的值只有UnitPrice和MaxPrice,所以想到把UnitPrice和MaxPrice添加到idx_calc的包含列中。如图
DSC0002.png

  然后执行查询sql语句,发现执行时间再次减半,只要6313毫秒,现在已经从之前的20多秒优化成6秒多。

3、再次优化查询Sql
  再次分析sql语句可以把计算所有数据的avg(price)语句暂时放置临时表(#temp_table)中,再计算其他值的时候直接从临时表中(#temp_table)获取数据。
DSC0003.png

  然后执行查询sql语句,执行时间只有2323毫秒。
  在硬件、表数据量和查询稍复杂的情况下,这样已经可以基本上满足查询需求了。

三、总结
  经过三步:1、建立索引,2、添加包含列,3、用临时表。用三步可以把查询时间从20秒优化至2秒
  如果对您有帮助,欢迎推荐。。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-423720-1-1.html 上篇帖子: SQL Server之备份和还原系统数据库 下篇帖子: Sql Server 游标概念与实例
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表