Username: Password:

编程实例 SQL语句优化技术分析
来源:博客园 作者:博客园 发布时间:2008-04-28 00:00:00

 最近几周一直在进行数据库培训,老师精湛的技术和生动的讲解使我受益匪浅。为了让更多的新手受益,我抽空把SQL语句优化部分进行了整理,希望大家一起进步。  

  一、操作符优化  

 1、IN 操作符   

  用IN写出来的SQL的长处是比较容易写及清楚易懂,这比较适合现代软件研发的风格。但是用IN的SQL性能总是比较低的,从Oracle执行的步骤来分析用IN的SQL和不用IN的SQL有以下区分:  

  ORACLE试图将其转换成多个表的连接,假如转换不成功则先执行IN里面的子查询,再查询外层的表记录,假如转换成功则直接采用多个表的连接方式查询。由此可见用IN的SQL至少多了一转换的过程。一般的SQL都能够转换成功,但对于含有分组统计等方面的SQL就不能转换了。  

  推荐方案:在业务密集的SQL当中尽量不采用IN操作符,用EXISTS 方案代替。  

  2、NOT IN操作符   

  此操作是强列不推荐使用的,因为他不能应用表的索引。   

  推荐方案:用NOT EXISTS 方案代替   

  3、IS NULL 或IS NOT NULL操作(判断字段是否为空)   

  判断字段是否为空一般是不会应用索引的,因为索引是不索引空值的。  

  推荐方案:用其他相同功能的操作运算代替,如:a is not null 改为 a>0 或a>’’等。不允许字段为空,而用一个缺省值代替空值,如申请中状态字段不允许为空,缺省为申请。   

  4、> 及 < 操作符(大于或小于操作符)   

  大于或小于操作符一般情况下是不用调整的,因为他有索引就会采用索引查找,但有的情况下能够对他进行优化,如一个表有100万记录,一个数值型字段A,30万记录的A=0,30万记录的A=1,39万记录的A=2,1万记录的A=3。那么执行A>2和A>=3的效果就有很大的区分了,因为A>2时ORACLE会先找出为2的记录索引再进行比较,而A>=3时ORACLE则直接找到=3的记录索引。   

  5、LIKE操作符   

  LIKE操作符能够应用通配符查询,里面的通配符组合可能达到几乎是任意的查询,但是假如用得不好则会产生性能上的问题,如LIKE ‘%5400%’ 这种查询不会引用索引,而LIKE ‘X5400%’则会引用范围索引。   

  一个实际例子:用YW_YHJBQK表中营业编号后面的户标识号可来查询营业编号 YY_BH LIKE ‘%5400%’ 这个条件会产生全表扫描,假如改成YY_BH LIKE ’X5400%’ OR YY_BH LIKE ’B5400%’ 则会利用YY_BH的索引进行两个范围的查询,性能肯定大大提高。   

  6、UNION操作符   

  UNION在进行表链接后会筛选掉重复的记录,所以在表链接后会对所产生的结果集进行排序运算,删除重复的记录再返回结果。实际大部分应用中是不会产生重复的记录,最常见的是过程表和历史表UNION。如:

  select * from gc_dfys

  union

  select * from ls_jg_dfys

  这个SQL在运行时先取出两个表的结果,再用排序空间进行排序删除重复的记录,最后返回结果集,假如表数据量大的话可能会导致用磁盘进行排序。   

  推荐方案:采用UNION ALL操作符替代UNION,因为UNION ALL操作只是简单的将两个结果合并后就返回。  

  select * from gc_dfys

  union all

  select * from ls_jg_dfys  

  二、SQL书写的影响  

  1、同一功能同一性能不同写法SQL的影响。  

  如一个SQL在A程式员写的为 Select * from zl_yhjbqk  

  B程式员写的为 Select * from dlyx.zl_yhjbqk(带表任何者的前缀)   

  C程式员写的为 Select * from DLYX.ZLYHJBQK(大写表名)   

  D程式员写的为 Select * from DLYX.ZLYHJBQK(中间多了空格)   

  以上四个SQL在ORACLE分析整理之后产生的结果及执行的时间是相同的,但是从ORACLE共享内存SGA的原理,能够得出ORACLE对每个SQL 都会对其进行一次分析,并且占用共享内存,假如将SQL的字符串及格式写得完全相同,则ORACLE只会分析一次,共享内存也只会留下一次的分析结果,这不但能够减少分析SQL的时间,而且能够减少共享内存重复的信息,ORACLE也能够准确统计SQL的执行频率。   

  2、WHERE后面的条件顺序影响   

  WHERE子句后面的条件顺序对大数据量表的查询会产生直接的影响。如:

  Select * from zl_yhjbqk where dy_dj = ’1KV以下’ and xh_bz=1

  Select * from zl_yhjbqk where xh_bz=1 and dy_dj = ’1KV以下’

  以上两个SQL中dy_dj(电压等级)及xh_bz(销户标志)两个字段都没进行索引,所以执行的时候都是全表扫描,第一条SQL的dy_dj = ’1KV以下’条件在记录集内比率为99%,而xh_bz=1的比率只为0.5%,在进行第一条SQL的时候99%条记录都进行dy_dj及xh_bz的比较,而在进行第二条SQL的时候0.5%条记录都进行dy_dj及xh_bz的比较,以此能够得出第二条SQL的CPU占用率明显比第一条低。   

  3、查询表顺序的影响   

  在FROM后面的表中的列表顺序会对SQL执行性能影响,在没有索引及ORACLE没有对表进行统计分析的情况下,ORACLE会按表出现的顺序进行链接,由此可见表的顺序不对时会产生十分耗服物器资源的数据交叉。(注:假如对表进行了统计分析,ORACLE会自动先进小表的链接,再进行大表的链接)   

  三、SQL语句索引的利用   

  1、操作符优化(同上)  
 
  2、对条件字段的一些优化   

  采用函数处理的字段不能利用索引,如:   

  substr(hbs_bh,1,4)=’5400’,优化处理:hbs_bh like ‘5400%’   

  trunc(sk_rq)=trunc(sysdate), 优化处理:sk_rq>=trunc(sysdate) and sk_rq
  进行了显式或隐式的运算的字段不能进行索引,如:ss_df+20>50,优化处理:ss_df>30   

  ‘X’    hbs_bh>’X5400021452’,优化处理:hbs_bh>’5400021542’  

  sk_rq+5=sysdate,优化处理:sk_rq=sysdate-5   

  hbs_bh=5401002554,优化处理:hbs_bh=’ 5401002554’,注:此条件对hbs_bh 进行隐式的to_number转换,因为hbs_bh字段是字符型。   

  条件内包括了多个本表的字段运算时不能进行索引,如:ys_df>cx_df,无法进行优化

  qc_bh    kh_bh=’5400250000’,优化处理:qc_bh=’5400’ and kh_bh=’250000’  

  四、其他  

  ORACLE的提示功能是比较强的功能,也是比较复杂的应用,并且提示只是给ORACLE执行的一个建议,有时假如出于成本方面的考虑ORACLE也可能不会按提示进行。根据实践应用,一般不建议研发人员应用ORACLE提示,因为各个数据库及服务器性能情况不相同,很可能一个地方性能提升了,但另一个地方却下降了,ORACLE在SQL执行分析方面已比较成熟,假如分析执行的路径不对首先应在数据库结构(主要是索引)、服务器当前性能(共享内存、磁盘文档碎片)、数据库对象(表、索引)统计信息是否正确这几方面分析。

喜欢本文,那就收藏到:

    Del.icio.us Google书签 Digg Live Bookmark Technorati Furl Yahoo书签 Facebook 百度搜藏 新浪ViVi 365Key网摘 天极网摘 和讯网摘 博拉网 POCO网摘 添加到饭否 QQ书签 Digbuzz我挖网
相关评论  我也要评论
还没有关于此文章的相关评论!
  • 昵称: (为空则显示guest)
  • 评论分数: ★ ★ ★★★ ★★★★ ★★★★★
  • 评论内容:(不能超过250字,需审核后才会公布,请自觉遵守互联网相关政策法规。
  • 导航
    赞助商
    文章类别
    订阅