SQL Server 性能调优之查询从20秒至2秒的处理方法

 更新时间:2017年07月19日 11:13:33   作者:Emrys5  
这篇文章主要介绍了SQL Server 性能调优之查询从20秒至2秒的处理方法,需要的朋友可以参考下

一、需求

需求很简单,就是需要查询一个报表,只有1个表,数据量大约60万左右,但是中间有些逻辑。

先说明一下服务器配置情况:1核CPU、2GB内存、机械硬盘、Sqlserver 2008 R2、Windows Server2008 R2 SP1和阿里云的服务器,简单说就是阿里云最差的服务器。

1、原始表结构

非常简单的一张表,这次不讨论数据冗余和表字段的设计,如是否可以把Project和Baojian提出成一个表等等,这个是原始表结构,这个目前是没有办法改变的。

2、查询的sql语句为

select *from(
 select *,ROW_NUMBER() OVER (ORDER BY sc desc) as rank 
 from(
  select *,
    case when ( 40-(a.p*(case when a.p > 0 then 1 else -0.5 end)))<=30 
      then 30 
      else ( 40-(a.p*(case when a.p > 0 then 1 else -0.5 end))) 
      end as sc 
  from (
  select * from (
    select a.ProjectNumber, a.ProjectName, a.BaojianNumber, a.BaojianName, a.ToubiaoPerson,
     sum(UnitPrice) as sumPrice, 
     b.price as avgPrice, 
     ((sum(UnitPrice)-b.price)/nullif(b.price,0)*100) as p,
     sum(case when UnitPrice>b.price then b.price else UnitPrice end )as pprice,
     sum(case when UnitPrice>MaxPrice then 1 else 0 end ) as countChao
    from ToubiaoDetailTest1 a
      join (
       select ProjectNumber, ProjectName, BaojianNumber, BaojianName, avg(price) as price
       from(
        select * from(
         select ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson, 
          SUM(UnitPrice) as price,
          SUM(case when UnitPrice>MaxPrice then 1 else 0 end ) as countChao
         from ToubiaoDetailTest1 
         group BY ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson
        ) tt 
        where tt.countChao = 0
       ) t
       group by ProjectNumber, ProjectName, BaojianNumber, BaojianName
      ) b 
       on a.ProjectNumber=b.ProjectNumber and a.ProjectName=b.ProjectName and a.BaojianNumber=b.BaojianNumber and a.BaojianName=b.BaojianName
    group by a.BaojianNumber, a.BaojianName, a.ProjectNumber, a.ProjectName, a.ToubiaoPerson, b.price 
   ) tt 
   where tt.countChao=0
  ) a 
 ) b
) t 
order by rank 

此段sql语句主要的功能是:

1、根据ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson分组,查询所有数据的sum(UnitPrice)

  其中UnitPrice>MaxPrice的判断是为了逻辑,如果有一条数据满足,则此分组所有的数据不查询。

2、根据ProjectNumber, ProjectName, BaojianNumber, BaojianName 分组,查询所有数据的avg(price),以上两步主要就是为了查询根据ProjectNumber, ProjectName, BaojianNumber, BaojianName分组的avg(price)值。

3、然后根据逻辑获取相应的值、分数和按照分数排序分页等等操作。

二、性能调优

在未做任何优化之前,查询一次的时间大约为20秒左右。

1、建立索引

根据sql语句我们可以知道,会根据5个字段(ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson)进行分组聚合,所以尝试添加非聚集索引idx_calc。

在索引键列添加ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson。如图:

然后执行查询sql语句,发现执行时间已经减半了,只要10610毫秒。

2、索引包含列

分析查询sql可以得知,我们需要计算的值只有UnitPrice和MaxPrice,所以想到把UnitPrice和MaxPrice添加到idx_calc的包含列中。如图

然后执行查询sql语句,发现执行时间再次减半,只要6313毫秒,现在已经从之前的20多秒优化成6秒多。

3、再次优化查询Sql

再次分析sql语句可以把计算所有数据的avg(price)语句暂时放置临时表(#temp_table)中,再计算其他值的时候直接从临时表中(#temp_table)获取数据。

然后执行查询sql语句,执行时间只有2323毫秒。

在硬件、表数据量和查询稍复杂的情况下,这样已经可以基本上满足查询需求了。

三、总结

经过三步:1、建立索引,2、添加包含列,3、用临时表。用三步可以把查询时间从20秒优化至2秒。

以上所述是小编给大家介绍的SQL Server 性能调优之查询从20秒至2秒,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!

相关文章

  • SQL Server 2012 sa用户登录错误18456的解决方法

    SQL Server 2012 sa用户登录错误18456的解决方法

    这篇文章主要为大家详细介绍了SQL Server 2012 sa用户登录错误18456的解决方法,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2017-09-09
  • SQL设置SQL Server最大连接数及查询语句

    SQL设置SQL Server最大连接数及查询语句

    今天遇到了关于Sql Server最大连接数(Max Pool Size)的问题,后来通过查找一些资料解决了,所以想着总结下关于SQL Server最大连接数的内容,所以这篇文章主要介绍了SQL设置SQL Server最大连接数与查询语句,有需要的朋友们可以参考借鉴。
    2016-12-12
  • SQL LOADER错误小结

    SQL LOADER错误小结

    在使用SQL*LOADER装载数据时,由于平面文件的多样化和数据格式问题总会遇到形形色色的一些小问题,下面是小编抽时间整理的一些错误,感兴趣的朋友一起学习吧
    2015-12-12
  • 判断字段是否被更新 新旧数据写入Audit Log表中

    判断字段是否被更新 新旧数据写入Audit Log表中

    客户要求,要对一个敏感数据表进行Audit跟踪。如果记录被更新时,要把旧新保存起来,是谁更改了记录,什么时候更新的等相关信息。还有一个主要问题就是客户不确定具体要跟踪那个字段,希望自己决定
    2012-01-01
  • SQLServer中求两个字符串的交集

    SQLServer中求两个字符串的交集

    代码高亮有点问题,测试时把@ str替换为@str
    2009-08-08
  • SQL普通表转分区表的方法

    SQL普通表转分区表的方法

    SQL普通表转分区表的方法,需要的朋友可以参考一下
    2013-03-03
  • SQL Server中row_number函数用法入门介绍

    SQL Server中row_number函数用法入门介绍

    SQL ROW_NUMBER函数是临时值序列的非持久生成,并且在执行查询时会动态计算该函数,下面这篇文章主要给大家介绍了关于SQL Server中row_number函数用法的相关资料,需要的朋友可以参考下
    2023-03-03
  • SQL子查询的具体使用

    SQL子查询的具体使用

    SQL子查询是嵌套在其他SQL查询中的查询,本文主要介绍了SQL子查询的具体使用,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2024-05-05
  • SQL 判断字段类型语句

    SQL 判断字段类型语句

    SQL 判断字段类型语句实现代码。
    2009-09-09
  • 将mater库中的系统存储过程批量生成*.sql文件 通用且非常实用

    将mater库中的系统存储过程批量生成*.sql文件 通用且非常实用

    最近因为系统需要,需要将master库的所有和业务相关的存储过程批量生成 存储过程名.sql 文件,默认是不可以导出的
    2012-05-05

最新评论