`
xitonga
  • 浏览: 616010 次
文章分类
社区版块
存档分类
最新评论

SQL多表联查优化

 
阅读更多

这里提供的是执行性能的优化,而不是后台数据库优化器资料:

参考数据库开发性能方面的各种问题,收集了一些优化方案统计如下(当然,象索引等优化方案太过简单就不列入了,嘿嘿):

执行路径:ORACLE的这个功能大大地提高了SQL的执行性能并节省了内存的使用:我们发现,单表数据的统计比多表统计的速度完全是两个概念.单表统计可能只要0.02秒,但是2张表联合统计就可能要几十表了.这是因为ORACLE只对简单的表提供高速缓冲(cachebuffering),这个功能并不适用于多表连接查询..数据库管理员必须在init.ora中为这个区域设置合适的参数,当这个内存区域越大,就可以保留更多的语句,当然被共享的可能性也就越大了.

当你向ORACLE提交一个SQL语句,ORACLE会首先在这块内存中查找相同的语句.
这里需要注明的是,ORACLE对两者采取的是一种严格匹配,要达成共享,SQL语句必须
完全相同(包括空格,换行等).
共享的语句必须满足三个条件:
A.字符级的比较:
当前被执行的语句和共享池中的语句必须完全相同.
例如:
SELECT*FROMEMP;
和下列每一个都不同
SELECT*fromEMP;
Select*FromEmp;
SELECT*FROMEMP;

B.两个语句所指的对象必须完全相同:

用户对象名如何访问
Jacksal_limitprivatesynonym
Work_citypublicsynonym
Plant_detailpublicsynonym
Jillsal_limitprivatesynonym
Work_citypublicsynonym
Plant_detailtableowner
考虑一下下列SQL语句能否在这两个用户之间共享.
SQL能否共享原因
selectmax(sal_cap)fromsal_limit;不能每个用户都有一个privatesynonym-sal_limit,它们是不同的对象
selectcount(*)fromwork_citywheresdesclike'NEW%';能两个用户访问相同的对象publicsynonym-work_city
selecta.sdesc,b.locationfromwork_citya,plant_detailbwherea.city_id=b.city_id不能用户jack通过privatesynonym访问plant_detail而jill是表的所有者,对象不同.

C.两个SQL语句中必须使用相同的名字的绑定变量(bindvariables)
例如:第一组的两个SQL语句是相同的(可以共享),而第二组中的两个语句是不同的(即使在运行时,赋于不同的绑定变量相同的值)
a.
selectpin,namefrompeoplewherepin=:blk1.pin;
selectpin,namefrompeoplewherepin=:blk1.pin;
b.
selectpin,namefrompeoplewherepin=:blk1.ot_ind;
selectpin,namefrompeoplewherepin=:blk1.ov_ind;
重点关注1:选择最有效率的表名顺序(只在基于规则的优化器中有效)重点关注
ORACLE的解析器按照从右到左的顺序处理FROM子句中的表名,因此FROM子句中写在最后的表(基础表drivingtable)将被最先处理.在FROM子句中包含多个表的情况下,你必须选择记录条数最少的表作为基础表.当ORACLE处理多个表时,会运用排序及合并的方式连接它们.首先,扫描第一个表(FROM子句中最后的那个表)并对记录进行派序,然后扫描第二个表(FROM子句中最后第二个表),最后将所有从第二个表中检索出的记录与第一个表中合适记录进行合并.
例如:表TAB116,384条记录
表TAB21条记录
选择TAB2作为基础表(最好的方法)
selectcount(*)fromtab1,tab2执行时间0.96秒
选择TAB2作为基础表(不佳的方法)
selectcount(*)fromtab2,tab1执行时间26.09秒
如果有3个以上的表连接查询,那就需要选择交叉表(intersectiontable)作为基础表,交叉表是指那个被其他表所引用的表.
例如:EMP表描述了LOCATION表和CATEGORY表的交集.
SELECT*
FROMLOCATIONL,
CATEGORYC,
EMPE
WHEREE.EMP_NOBETWEEN1000AND2000
ANDE.CAT_NO=C.CAT_NO
ANDE.LOCN=L.LOCN
将比下列SQL更有效率
SELECT*
FROMEMPE,
LOCATIONL,
CATEGORYC
WHEREE.CAT_NO=C.CAT_NO
ANDE.LOCN=L.LOCN
ANDE.EMP_NOBETWEEN1000AND2000
重点关注2:WHERE子句中的连接顺序.重点关注

ORACLE采用自下而上的顺序解析WHERE子句,根据这个原理,表之间的连接必须写在其他WHERE条件之前,那些可以过滤掉最大数量记录的条件必须写在WHERE子句的末尾.
例如:
(低效,执行时间156.3秒)
SELECT…
FROMEMPE
WHERESAL>;50000
ANDJOB=‘MANAGER’
AND25<(SELECTCOUNT(*)FROMEMP
WHEREMGR=E.EMPNO);
(高效,执行时间10.6秒)
SELECT…
FROMEMPE
WHERE25<(SELECTCOUNT(*)FROMEMP
WHEREMGR=E.EMPNO)
ANDSAL>;50000
ANDJOB=‘MANAGER’;
重点关注3:SELECT子句中避免使用‘*‘.重点关注

当你想在SELECT子句中列出所有的COLUMN时,使用动态SQL列引用‘*’是一个方便的方法.不幸的是,这是一个非常低效的方法.实际上,ORACLE在解析的过程中,会将’*’依次转换成所有的列名,这个工作是通过查询数据字典完成的,这意味着将耗费更多的时间.
7.减少访问数据库的次数
当执行每条SQL语句时,ORACLE在内部执行了许多工作:解析SQL语句,估算索引的利用率,绑定变量,读数据块等等.由此可见,减少访问数据库的次数,就能实际上减少ORACLE的工作量.
例如,
以下有三种方法可以检索出雇员号等于0342或0291的职员.
方法1(最低效)
SELECTEMP_NAME,SALARY,GRADE
FROMEMP
WHEREEMP_NO=342;
SELECTEMP_NAME,SALARY,GRADE
FROMEMP
WHEREEMP_NO=291;
方法2(次低效)
DECLARE
CURSORC1(E_NONUMBER)IS
SELECTEMP_NAME,SALARY,GRADE
FROMEMP
WHEREEMP_NO=E_NO;
BEGIN
OPENC1(342);
FETCHC1INTO…,..,..;
OPENC1(291);
FETCHC1INTO…,..,..;
CLOSEC1;
END;
方法3(高效)
SELECTA.EMP_NAME,A.SALARY,A.GRADE,
B.EMP_NAME,B.SALARY,B.GRADE
FROMEMPA,EMPB
WHEREA.EMP_NO=342
ANDB.EMP_NO=291;
注意:
在SQL*Plus,SQL*Forms和Pro*C中重新设置ARRAYSIZE参数,可以增加每次数据库访问的检索数据量,建议值为200.

重点关注4:使用DECODE函数来减少处理时间.重点关注
使用DECODE函数可以避免重复扫描相同记录或重复连接相同的表.
例如:
SELECTCOUNT(*),SUM(SAL)
FROM EMP
WHEREDEPT_NO=0020
ANDENAMELIKE ‘SMITH%’;
SELECTCOUNT(*),SUM(SAL)
FROM EMP
WHEREDEPT_NO=0030
ANDENAMELIKE ‘SMITH%’;
你可以用DECODE函数高效地得到相同结果
SELECTCOUNT(DECODE(DEPT_NO,0020,’X’,NULL))D0020_COUNT,
COUNT(DECODE(DEPT_NO,0030,’X’,NULL))D0030_COUNT,
SUM(DECODE(DEPT_NO,0020,SAL,NULL))D0020_SAL,
SUM(DECODE(DEPT_NO,0030,SAL,NULL))D0030_SAL
FROMEMPWHEREENAMELIKE‘SMITH%’;
类似的,DECODE函数也可以运用于GROUPBY和ORDERBY子句中.

重点关注5:删除重复记录.重点关注

最高效的删除重复记录方法(因为使用了ROWID)
DELETEFROMEMPE
WHEREE.ROWID>;(SELECTMIN(X.ROWID)
FROMEMPX
WHEREX.EMP_NO=E.EMP_NO);

重点关注6:用TRUNCATE替代DELETE.重点关注

当删除表中的记录时,在通常情况下,回滚段(rollbacksegments)用来存放可以被恢复的信息.如果你没有COMMIT事务,ORACLE会将数据恢复到删除之前的状态(准确地说是恢复到执行删除命令之前的状况)
而当运用TRUNCATE时,回滚段不再存放任何可被恢复的信息.当命令运行后,数据不能被恢复.因此很少的资源被调用,执行时间也会很短.
(译者按:TRUNCATE只在删除全表适用,TRUNCATE是DDL不是DML)

重点关注7:尽量多使用COMMIT.重点关注

只要有可能,在程序中尽量多使用COMMIT,这样程序的性能得到提高,需求也会因为COMMIT所释放的资源而减少:
COMMIT所释放的资源:
a.回滚段上用于恢复数据的信息.
b.被程序语句获得的锁
c.redologbuffer中的空间
d.ORACLE为管理上述3种资源中的内部花费
(译者按:在使用COMMIT时必须要注意到事务的完整性,现实中效率和事务完整性往往是鱼和熊掌不可得兼)
重点关注8:减少对表的查询.重点关注

在含有子查询的SQL语句中,要特别注意减少对表的查询.

例如:
低效
SELECTTAB_NAME
FROMTABLES
WHERETAB_NAME=(SELECTTAB_NAME
FROMTAB_COLUMNS
WHEREVERSION=604)
AND DB_VER=(SELECTDB_VER
FROMTAB_COLUMNS
WHEREVERSION=604)
高效
SELECTTAB_NAME
FROMTABLES
WHERE(TAB_NAME,DB_VER)
=(SELECTTAB_NAME,DB_VER)
FROMTAB_COLUMNS
WHEREVERSION=604)
Update多个Column例子:
低效:
UPDATEEMP
SETEMP_CAT=(SELECTMAX(CATEGORY)FROMEMP_CATEGORIES),
SAL_RANGE=(SELECTMAX(SAL_RANGE)FROMEMP_CATEGORIES)
WHEREEMP_DEPT=0020;
高效:
UPDATEEMP
SET(EMP_CAT,SAL_RANGE)
=(SELECTMAX(CATEGORY),MAX(SAL_RANGE)
FROMEMP_CATEGORIES)
WHEREEMP_DEPT=0020;
重点关注9:用EXISTS替代IN.重点关注

在许多基于基础表的查询中,为了满足一个条件,往往需要对另一个表进行联接.在这种情况下,使用EXISTS(或NOTEXISTS)通常将提高查询的效率.
低效:
SELECT*
FROMEMP(基础表)
WHEREEMPNO>;0
ANDDEPTNOIN(SELECTDEPTNO
FROMDEPT
WHERELOC=‘MELB’)
高效:
SELECT*
FROMEMP(基础表)
WHEREEMPNO>;0
ANDEXISTS(SELECT‘X’
FROMDEPT
WHEREDEPT.DEPTNO=EMP.DEPTNO
ANDLOC=‘MELB’)
(译者按:相对来说,用NOTEXISTS替换NOTIN将更显著地提高效率,下一节中将指出)
重点关注10:用NOTEXISTS替代NOTIN.重点关注

在子查询中,NOTIN子句将执行一个内部的排序和合并.无论在哪种情况下,NOTIN都是最低效的(因为它对子查询中的表执行了一个全表遍历).为了避免使用NOTIN,我们可以把它改写成外连接(OuterJoins)或NOTEXISTS.
例如:
SELECT…
FROMEMP
WHEREDEPT_NONOTIN(SELECTDEPT_NO
FROMDEPT
WHEREDEPT_CAT=’A’);
为了提高效率.改写为:
(方法一:高效)
SELECT….
FROMEMPA,DEPTB
WHEREA.DEPT_NO=B.DEPT(+)
ANDB.DEPT_NOISNULL
ANDB.DEPT_CAT(+)=‘A’
(方法二:最高效)
SELECT….
FROMEMPE
WHERENOTEXISTS(SELECT‘X’
FROMDEPTD
WHERED.DEPT_NO=E.DEPT_NO
ANDDEPT_CAT=‘A’);
当然,最高效率的方法是有表关联.直接两表关系对联的速度是最快的!
重点关注11:识别’低效执行’的SQL语句.重点关注

用下列SQL工具找出低效SQL:
SELECTEXECUTIONS,DISK_READS,BUFFER_GETS,
ROUND((BUFFER_GETS-DISK_READS)/BUFFER_GETS,2)Hit_radio,
ROUND(DISK_READS/EXECUTIONS,2)Reads_per_run,
SQL_TEXT
FROMV$SQLAREA
WHEREEXECUTIONS>;0
ANDBUFFER_GETS>;0
AND(BUFFER_GETS-DISK_READS)/BUFFER_GETS<0.8
ORDERBY4DESC;
(译者按:虽然目前各种关于SQL优化的图形化工具层出不穷,但是写出自己的SQL工具来解决问题始终是一个最好的方法)

分享到:
评论

相关推荐

    多表联查分页显示

    实现多表联查的方法有多种,其中最常见的是使用SQL的JOIN语句,包括INNER JOIN(内连接)、LEFT JOIN(左连接)、RIGHT JOIN(右连接)和FULL JOIN(全连接)。INNER JOIN返回两个表中匹配的行,LEFT JOIN返回左表的...

    SQL Server多表查询优化方案集锦

    在SQL Server中,多表查询优化对于提升数据库性能至关重要,特别是在大数据量的环境中。本文将深入探讨几个关键的优化策略,以帮助改善SQL Server多表查询的效率。 1. **执行计划优化**:执行计划是SQL Server解析...

    Sql联查应用心得与总结

    联查是SQL语言中最常用也是最复杂的部分之一,它允许我们从两个或多个表中检索数据,并且可以根据指定的条件将这些表中的相关数据行组合在一起。 #### 二、SQL联查的种类及其用法 在SQL中,主要有四种类型的联查:...

    postgre-sql优化方法

    多表联查优化 多表联查是数据库查询中的一种常见操作,但是它对性能的影响非常大。因此,需要考虑连接顺序问题,例如: * 当 PostgreSQL 中进行查询时,如果多表是通过逗号,而不是 Join 连接,那么连接顺序是多表...

    Oracle数据库中的多表联查与分页查询技术详解

    适用人群:对于希望深入了解Oracle SQL查询语句,尤其是提高多表联接查询能力和数据检索效率的中高级数据库管理员或者程序员来说非常适合。 使用场景及目标:适用于需要频繁处理复杂数据关系和大量数据展示的企业级...

    SQL Server数据库查询速度慢原因及优化方法

    【赛迪网-IT技术报道】SQL Server数据库查询速度慢的原因有很多,常见的有以下几种:  1、没有索引或者没有用到索引(这是查询慢最常见的问题,是程序设计的缺陷)  2、I/O吞吐量小,形成了瓶颈效应。  3、没有...

    结合mybatis-plus实现简单不需要写sql的多表查询

    在多表查询方面,MyBatis-Plus 提供了简单易用的方法,让开发者能够通过实体类之间的关联关系进行联查。 在 MyBatis-Plus 中,实现多表查询的关键在于实体类的关联和注解的使用。首先,你需要确保项目中已经集成了 ...

    mysql代码-多表联查测试

    多表联查是指在一个SQL查询中涉及两个或更多个表,通过这些表之间的关系,合并数据,从而得到更完整的信息。在数据库设计中,通常会将数据分散到多个表中,以遵循第一范式(1NF)和正常化原则,降低数据冗余。因此,...

    通过SQL_Server_2005索引视图提高性能

    非聚集索引提供了更多的查询优化选择,尤其当查询涉及到不在聚集索引中的列时,非聚集索引可以帮助查询优化器避免全表扫描,从而提升性能。 #### 四、应用索引视图的优点 1. **提高数据访问速度**:通过预先计算和...

    详解Mysql多表联合查询效率分析及优化

    1. 多表连接类型 1. 笛卡尔积(交叉连接) 在MySQL中可以为CROSS JOIN或者省略CROSS即JOIN,或者使用’,’ 如: SELECT * FROM table1 CROSS JOIN table2 SELECT * FROM table1 JOIN table2 SELECT * FROM table1,...

    sql server 分页存贮,联查,下级查询上级

    联查用于将两个或多个表的数据结合在一起,基于它们之间的关联字段。SQL Server支持多种JOIN类型:INNER JOIN(内连接)、LEFT JOIN(左连接)、RIGHT JOIN(右连接)和FULL OUTER JOIN(全外连接)。以INNER JOIN为...

    第四章 约束序列分页语句两表联查.pdf

    在本章节中,我们将详细讨论数据库中几个重要知识点,包括约束、序列、分页语句以及表的联查方法。这些内容对于理解关系型数据库管理系统的高级操作是至关重要的。下面我们将逐一展开这些知识点。 首先,约束是...

    SQL编写规范.doc

    13. **避免多表联合复杂查询**:虽然有时候不可避免地需要进行多表联查,但应尽量简化查询逻辑,减少参与联查的表数量。 14. **函数和表达式位置**:在SQL语句中,建议将数据库函数和计算表达式放在等号的右侧,这有...

    Laravel开发-sql-dumper

    然而,SQL Dumper提供了一个更直观的方式来查看这些查询,尤其是在复杂的事务处理和多表联查时。 在使用Laravel SQL Dumper之前,你需要安装相应的扩展库。通常,这可以通过Composer来完成,运行如下命令: ```...

    Delphi数据库多表查询组件

    综上所述,"Delphi数据库多表查询组件"是一个强大的工具,它简化了数据库查询的复杂性,使开发者能够专注于业务逻辑,而不是底层的SQL构造。通过熟练运用这个组件,开发者可以大大提高在Delphi平台上的数据库应用...

    SQL技术手册(PDF)

    SELECT语句支持多表联查、聚合函数(如COUNT、SUM、AVG、MAX和MIN)、WHERE子句用于条件筛选、GROUP BY进行分组、HAVING用于过滤分组后的结果以及ORDER BY进行排序。 4. **更新与删除数据** 更新数据使用UPDATE...

    hibernate将本地SQL查询结果封装成对象

    对于复杂查询,可能涉及到多表联查,此时可以使用`addJoin()`方法指定JOIN条件,并通过`addScalar()`将每列映射到对应的属性: ```java query.addJoin("table2", "t2"); query.addScalar("t2.column1", Hibernate....

    省市三级联动数据库SQL版

    同时,查询优化也非常重要,因为涉及多表联查,特别是在数据量大的情况下,需要合理设置索引以提高查询效率。 在开发过程中,开发人员通常会使用SQL语句来插入、更新或查询这些数据。例如,获取某个省份下所有城市...

Global site tag (gtag.js) - Google Analytics