`
liyong1115
  • 浏览: 11172 次
  • 性别: Icon_minigender_1
  • 来自: 0
社区版块
存档分类
最新评论

SQL性能<3>

阅读更多
1。已经检验的语句和已在共享池中的语句之间要完全一样
2。变量名称尽量一致
3。合理使用外联接
4。少用多层嵌套
5。多用并发
语句的优化步骤一般有:

1。调整sga区,使得sga区的是用最优。
2。sql语句本身的优化,工具有explain,sql trace等
3。数据库结构调整
4。项目结构调整

写语句的经验:

1。对于大表的查询使用索引
2、少用in,exist等
3、使用集合运算

1.对于大表查询中的列应尽量避免进行诸如
  To_char,to_date,to_number
  等转换
2.有索引的尽量用索引,有用到索引的条件写在前面
  如有可能和有必要就建立一些索引 
3.尽量避免进行全表扫描,限制条件尽可能多,以便更快
  搜索到要查询的数据

如何让你的SQL运行得更快

  交通银行长春分行电脑部 任亮

---- 人们在使用SQL时往往会陷入一个误区,即太关注于所得的结果是否正确,而忽略了不同的实现方法之间可能存在的性能差异,这种性能差异在大型的或是复杂的数据库环境中(如联机事务处理OLTP或决策支持系统DSS)中表现得尤为明显。笔者在工作实践中发现,不良的SQL往往来自于不恰当的索引设计、不充份的连接条件和不可优化的where子句。在对它们进行适当的优化后,其运行速度有了明显地提高!下面我将从这三个方面分别进行总结:

---- 为了更直观地说明问题,所有实例中的SQL运行时间均经过测试,不超过1秒的均表示为(< 1秒)。

---- 测试环境--
---- 主机:HP LH II
---- 主频:330MHZ
---- 内存:128兆
---- 操作系统:Operserver5.0.4
----数据库:Sybase11.0.3

一、不合理的索引设计
----例:表record有620000行,试看在不同的索引下,下面几个 SQL的运行情况:
---- 1.在date上建有一非个群集索引

select count(*) from record where date >
'19991201' and date < '19991214'and amount >
2000 (25秒)
select date,sum(amount) from record group by date
(55秒)
select count(*) from record where date >
'19990901' and place in ('BJ','SH') (27秒)
---- 分析:
----date上有大量的重复值,在非群集索引下,数据在物理上随机存放在数据页上,在范围查找时,必须执行一次表扫描才能找到这一范围内的全部行。

---- 2.在date上的一个群集索引

select count(*) from record where date >
'19991201' and date < '19991214' and amount >
2000 (14秒)
select date,sum(amount) from record group by date
(28秒)
select count(*) from record where date >
'19990901' and place in ('BJ','SH')(14秒)
---- 分析:
---- 在群集索引下,数据在物理上按顺序在数据页上,重复值也排列在一起,因而在范围查找时,可以先找到这个范围的起末点,且只在这个范围内扫描数据页,避免了大范围扫描,提高了查询速度。

---- 3.在place,date,amount上的组合索引

select count(*) from record where date >
'19991201' and date < '19991214' and amount >
2000 (26秒)
select date,sum(amount) from record group by date
(27秒)
select count(*) from record where date >
'19990901' and place in ('BJ, 'SH')(< 1秒)
---- 分析:
---- 这是一个不很合理的组合索引,因为它的前导列是place,第一和第二条SQL没有引用place,因此也没有利用上索引;第三个SQL使用了place,且引用的所有列都包含在组合索引中,形成了索引覆盖,所以它的速度是非常快的。

---- 4.在date,place,amount上的组合索引

select count(*) from record where date >
'19991201' and date < '19991214' and amount >
2000(< 1秒)
select date,sum(amount) from record group by date
(11秒)
select count(*) from record where date >
'19990901' and place in ('BJ','SH')(< 1秒)
---- 分析:
---- 这是一个合理的组合索引。它将date作为前导列,使每个SQL都可以利用索引,并且在第一和第三个SQL中形成了索引覆盖,因而性能达到了最优。

---- 5.总结:

---- 缺省情况下建立的索引是非群集索引,但有时它并不是最佳的;合理的索引设计要建立在对各种查询的分析和预测上。一般来说:

---- ①.有大量重复值、且经常有范围查询

(between, >,< ,>=,< =)和order by
、group by发生的列,可考虑建立群集索引;
---- ②.经常同时存取多列,且每列都含有重复值可考虑建立组合索引;

---- ③.组合索引要尽量使关键查询形成索引覆盖,其前导列一定是使用最频繁的列。

二、不充份的连接条件:
---- 例:表card有7896行,在card_no上有一个非聚集索引,表account有191122行,在 account_no上有一个非聚集索引,试看在不同的表连接条件下,两个SQL的执行情况:

select sum(a.amount) from account a,
card b where a.card_no = b.card_no(20秒)
---- 将SQL改为:
select sum(a.amount) from account a,
card b where a.card_no = b.card_no and a.
account_no=b.account_no(< 1秒)
---- 分析:
---- 在第一个连接条件下,最佳查询方案是将account作外层表,card作内层表,利用card上的索引,其I/O次数可由以下公式估算为:

---- 外层表account上的22541页+(外层表account的191122行*内层表card上对应外层表第一行所要查找的3页)=595907次I/O

---- 在第二个连接条件下,最佳查询方案是将card作外层表,account作内层表,利用account上的索引,其I/O次数可由以下公式估算为:

---- 外层表card上的1944页+(外层表card的7896行*内层表account上对应外层表每一行所要查找的4页)= 33528次I/O

---- 可见,只有充份的连接条件,真正的最佳方案才会被执行。

---- 总结:

---- 1.多表操作在被实际执行前,查询优化器会根据连接条件,列出几组可能的连接方案并从中找出系统开销最小的最佳方案。连接条件要充份考虑带有索引的表、行数多的表;内外表的选择可由公式:外层表中的匹配行数*内层表中每一次查找的次数确定,乘积最小为最佳方案。

---- 2.查看执行方案的方法-- 用set showplanon,打开showplan选项,就可以看到连接顺序、使用何种索引的信息;想看更详细的信息,需用sa角色执行dbcc(3604,310,302)。

三、不可优化的where子句
---- 1.例:下列SQL条件语句中的列都建有恰当的索引,但执行速度却非常慢:

select * from record where
substring(card_no,1,4)='5378'(13秒)
select * from record where
amount/30< 1000(11秒)
select * from record where
convert(char(10),date,112)='19991201'(10秒)
---- 分析:
---- where子句中对列的任何操作结果都是在SQL运行时逐列计算得到的,因此它不得不进行表搜索,而没有使用该列上面的索引;如果这些结果在查询编译时就能得到,那么就可以被SQL优化器优化,使用索引,避免表搜索,因此将SQL重写成下面这样:

select * from record where card_no like
'5378%'(< 1秒)
select * from record where amount
< 1000*30(< 1秒)
select * from record where date= '1999/12/01'
(< 1秒)

---- 你会发现SQL明显快起来!





---- 2.例:表stuff有200000行,id_no上有非群集索引,请看下面这个SQL:

select count(*) from stuff where id_no in('0','1')
(23秒)
---- 分析:
---- where条件中的'in'在逻辑上相当于'or',所以语法分析器会将in ('0','1')转化为id_no ='0' or id_no='1'来执行。我们期望它会根据每个or子句分别查找,再将结果相加,这样可以利用id_no上的索引;但实际上(根据showplan),它却采用了"OR策略",即先取出满足每个or子句的行,存入临时数据库的工作表中,再建立唯一索引以去掉重复行,最后从这个临时表中计算结果。因此,实际过程没有利用id_no上索引,并且完成时间还要受tempdb数据库性能的影响。

---- 实践证明,表的行数越多,工作表的性能就越差,当stuff有620000行时,执行时间竟达到220秒!还不如将or子句分开:

select count(*) from stuff where id_no='0'
select count(*) from stuff where id_no='1'
---- 得到两个结果,再作一次加法合算。因为每句都使用了索引,执行时间只有3秒,在620000行下,时间也只有4秒。或者,用更好的方法,写一个简单的存储过程:
create proc count_stuff as
declare @a int
declare @b int
declare @c int
declare @d char(10)
begin
select @a=count(*) from stuff where id_no='0'
select @b=count(*) from stuff where id_no='1'
end
select @c=@a+@b
select @d=convert(char(10),@c)
print @d
---- 直接算出结果,执行时间同上面一样快!
---- 总结:

---- 可见,所谓优化即where子句利用了索引,不可优化即发生了表扫描或额外开销。

---- 1.任何对列的操作都将导致表扫描,它包括数据库函数、计算表达式等等,查询时要尽可能将操作移至等号右边。

---- 2.in、or子句常会使用工作表,使索引失效;如果不产生大量重复值,可以考虑把子句拆开;拆开的子句中应该包含索引。

---- 3.要善于使用存储过程,它使SQL变得更加灵活和高效。

---- 从以上这些例子可以看出,SQL优化的实质就是在结果正确的前提下,用优化器可以识别的语句,充份利用索引,减少表扫描的I/O次数,尽量避免表搜索的发生。其实SQL的性能优化是一个复杂的过程,上述这些只是在应用层次的一种体现,深入研究还会涉及数据库层的资源配置、网络层的流量控制以及操作系统层的总体设计


分享到:
评论

相关推荐

    lecco sql export pro(SQL优化器)

    &lt;br&gt;&lt;br&gt; 3、找出所有等效的SQL语句及可能的执行计划;&lt;br&gt;&lt;br&gt; 4、产生相同的结果;&lt;br&gt;&lt;br&gt; 5、先进的SQL语法分析器能处理最复杂的SQL语句;&lt;br&gt;&lt;br&gt; 6、可重写SELECT、SELECTIN-TO、UPDATE、INSERT和DELETE...

    数据库程序设计—— SQL Server 2000 数据库程序设计(DOC+PPT)

    数据库程序设计—— SQL Server 2000 数据库程序设计,有完整的文档教程及幻灯,共22章:&lt;br&gt;第1章 SQL Server 概述&lt;br&gt;第2章 创建和管理数据库&lt;br&gt;第3章 创建数据类型和表&lt;br&gt;第4章 实现数据完整性&lt;br&gt;第5章 ...

    SQL2005入门到精通(25)

    监控SQL Server状态 508&lt;br&gt;25.1 查看当前活动 508&lt;br&gt;25.1.1 使用活动监视器 508&lt;br&gt;25.1.2 动态管理对象 510&lt;br&gt;25.2 使用系统性能监视器 512&lt;br&gt;25.2.1 运行系统性能监视器 513&lt;br&gt;25.2.2 SQL Server性能对象 ...

    Oracle 性能调整(真正由ORACLE甲骨文出品)

    &lt;br&gt; – 解决性能问题的步骤 &lt;br&gt; 分析症状 &lt;br&gt; 确定问题范围 &lt;br&gt; 参数调整or &lt;br&gt; 结构调整or &lt;br&gt;&lt;br&gt; 应用调整 &lt;br&gt; 性能监控 &lt;br&gt;&lt;br&gt;Shared Pool &lt;br&gt; – SHARED_POOL_SIZE 控制共享SQL缓冲存储区和数据字 ...

    SQL技术文摘

    &lt;br&gt;使用联接来查询多个表&lt;br&gt;SET NOCOUNT { ON | OFF } 说明&lt;br&gt;用sp_lock诊断SQL Sever的性能问题 &lt;br&gt;sql server临时表&lt;br&gt;如何保存数据库连接参数代码及步骤详解 &lt;br&gt;用数据源访问数据库&lt;br&gt;GDI+ 在Delphi程序的...

    C#编程经验技巧宝典

    2&lt;br&gt;&lt;br&gt;0003 设置程序代码行序号 3&lt;br&gt;&lt;br&gt;0004 开发环境全屏显示 3&lt;br&gt;&lt;br&gt;0005 设置窗口的自动隐藏功能 3&lt;br&gt;&lt;br&gt;0006 根据需要创建所需解决方案 4&lt;br&gt;&lt;br&gt;0007 如何使用“验证的目标架构”功能 4&lt;br&gt;...

    Oracle 9i Java程序设计——使用PL/SQL和Java的解决方案

    &lt;br&gt;原书名:Oracle 9i Java Programming&lt;br&gt;&lt;br&gt;Oracle 9i Java程序设计——使用PL/SQL和Java的解决方案 &lt;br&gt;&lt;br&gt;【原出版社】 Wrox Press &lt;br&gt;【作 者】Bjarki Holm,John Carnell等 &lt;br&gt;【译 者】 康博 &lt;br&gt;【丛 ...

    mysql5.1中文手册

    使用Perl DBI/DBD接口的问题&lt;br&gt;3. 教程&lt;br&gt;3.1. 连接与断开服务器&lt;br&gt;3.2. 输入查询&lt;br&gt;3.3. 创建并使用数据库&lt;br&gt;3.3.1. 创建并选择数据库&lt;br&gt;3.3.2. 创建表&lt;br&gt;3.3.3. 将数据装入表中&lt;br&gt;3.3.4. 从表检索信息&lt;br...

    项目辅助开发器1.0 Beta3

    采用多线程优化窗体性能&lt;br&gt;3.修正了带参数SQL语句的类型问题&lt;br&gt;&lt;br&gt;&lt;br&gt;1.0 Beta1版本功能&lt;br&gt;&lt;br&gt;1.主界面仿VS编译器效果,界面用起来更熟悉。&lt;br&gt;2.可模拟查询分析器执行TSQL语句&lt;br&gt;3.支持SQL Server 2000、SQL...

    MYSQL

    &lt;br&gt;1.6 顺应2000年 &lt;br&gt;1.7 SQL一般信息和教程 &lt;br&gt;1.8 有用的MySQL相关链接 &lt;br&gt;2 MySQL 邮件列表及如何提问或报告错误 &lt;br&gt;2.1 MySQL邮件列表 &lt;br&gt;2.2 提问或报告错误 &lt;br&gt;2.3 怎样报告错误或问题 &lt;br&gt;2.4 在...

    ibatis 开发指南(pdf)

    系统数据处理量巨大,性能要求极为苛刻,这往往意味着我们必须通过经过高&lt;br&gt;度优化的SQL 语句(或存储过程)才能达到系统性能设计指标。&lt;br&gt;面对这样的需求,再次举起Hibernate 大刀,却发现刀锋不再锐利,甚至...

    Safe3 IIS FireWall(一款完全免费的IIS防护软件)

    &lt;br&gt;&lt;br&gt; &lt;br&gt;&lt;br&gt;软件功能:&lt;br&gt;&lt;br&gt;防止SQL注入式攻击; &lt;br&gt;防止溢出代码攻击; &lt;br&gt;防止特殊字符构成的URL利用; &lt;br&gt;防止XSS跨站提交; &lt;br&gt;防止网站文件盗链; &lt;br&gt;防止构造危险的Cookie; &lt;br&gt;防止迅雷等p2p...

    项目辅助开发器 1.0 Beta2

    采用多线程优化窗体性能&lt;br&gt;3.修正了带参数SQL语句的类型问题&lt;br&gt;&lt;br&gt;&lt;br&gt;1.0 Beta1版本功能&lt;br&gt;&lt;br&gt;1.主界面仿VS编译器效果,界面用起来更熟悉。&lt;br&gt;2.可模拟查询分析器执行TSQL语句&lt;br&gt;3.支持SQL Server 2000、SQL...

    AppFramework_V1.0

    AppFramework&lt;br&gt;&lt;br&gt;(毫秒)&lt;br&gt; 后者前者性能对比&lt;br&gt;&lt;br&gt;(倍)&lt;br&gt; &lt;br&gt;根据主键获取实体&lt;br&gt;&lt;br&gt;(20次单条select)&lt;br&gt; 19.8&lt;br&gt; 16.1&lt;br&gt;&lt;br&gt;QueryFilter:18.0&lt;br&gt; 1.23&lt;br&gt;&lt;br&gt;1.10&lt;br&gt; &lt;br&gt;每秒插入实体&lt;br&gt;...

    AppFramework_V1.0_New

    720&lt;br&gt;1.59&lt;br&gt;&lt;br&gt;1.53&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;表II –50并发4循环(数据库和测试机分开)&lt;br&gt;&lt;br&gt;对比项目&lt;br&gt;iBatis2.0&lt;br&gt;&lt;br&gt;(毫秒)&lt;br&gt;AppFramework&lt;br&gt;&lt;br&gt;(毫秒)&lt;br&gt;后者前者性能对比&lt;br&gt;&lt;br&gt;(倍)&lt;br&gt;...

    AppFramework数据库访问组件_代码生成插件_V1.1.rar

    720&lt;br&gt;1.59&lt;br&gt;&lt;br&gt;1.53&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;表II –50并发4循环(数据库和测试机分开)&lt;br&gt;&lt;br&gt;对比项目&lt;br&gt;iBatis2.0&lt;br&gt;&lt;br&gt;(毫秒)&lt;br&gt;AppFramework&lt;br&gt;&lt;br&gt;(毫秒)&lt;br&gt;后者前者性能对比&lt;br&gt;&lt;br&gt;(倍)&lt;br&gt;...

    Linux环境数据库管理员指南

    目 录&lt;br&gt;译者序&lt;br&gt;前言&lt;br&gt;第1章 Linux操作系统 1&lt;br&gt;1.1 Linux的简要历史介绍 1&lt;br&gt;1.2 Linux核心 2&lt;br&gt;1.2.1 Linux的开发特点 2&lt;br&gt;1.2.2 Linux分发包 3&lt;br&gt;1.2.3 为什么要为商业Linux&lt;br&gt; 版本付费 3&lt;br&gt;1.3 ...

    Java数据编程指南

    附录&lt;br&gt;附录A SQL入门&lt;br&gt;什么是SQL&lt;br&gt;什么是数据库&lt;br&gt;关系数据库基础&lt;br&gt;关系数据库的优点和缺点&lt;br&gt;SQL:数据定义&lt;br&gt;基本数据操作&lt;br&gt;数据完整性&lt;br&gt;表达式&lt;br&gt;连接&lt;br&gt;合并&lt;br&gt;子查询&lt;br&gt;小结&lt;br&gt;附录B 序列...

    PL/SQL Developer 7.1.5 注册版-3

    &lt;br&gt;&lt;br&gt;性能优化——使用PL/SQL Profiler,可以浏览每一执行的PL/SQL代码行的时序信息(Oracle8i或更高),从而优化您SQL和PL/SQL的代码性能。&lt;br&gt;更进一步,您还可以自动获取所执行的SQL语句和PL/SQL程序统计信息...

    爱码者建站引擎系统 V1.0

    基于模板化高性能的建站引擎系统&lt;br&gt;&lt;br&gt;包括新闻管理、频道管理、模板管理、用户管理、数据库管理、友情链接管理等&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;data文件夹内是数据库,先还原数据库,数据库名为acms,如果更改的或web....

Global site tag (gtag.js) - Google Analytics