论坛首页 综合技术论坛

检查Oracle数据库中不合理的sql语句

浏览 28680 次
精华帖 (0) :: 良好帖 (0) :: 新手帖 (0) :: 隐藏帖 (0)
作者 正文
   发表时间:2003-09-16  
经常可以遇到这样的情况,由于程序员的sql语句写的非常不合理,导致Oracle数据库查询速度缓慢,严重的情况会导致数据库的故障。
举个例子,我以前就遇到过Oracle数据库定期(一周左右)出现 ORA-4031错误(shared pool内存不够,无法连接Oracle数据库),此时数据库已经无法再使用了。必须关闭重起,来释放那些占在shared pool里面无法释放的对象。
所以对于一个Oracle DBA来说,需要定期的检查shared pool中的sql语句占用的内存空间,对于严重占用shared pool,无法释放的sql语句,必须要求程序员修改或优化sql语句。
select sql_text ,sharable_mem from v$sql where sharable_mem > '100000' order by sharable_mem ; 


上面的sql语句是查询shared pool中占用内存超过100K的sql语句。

这个sql可以非常有效的检查出Oracle shared pool中那些严重占用内存的sql,根据我的经验,绝大多数有问题的sql语句都会在这里留下痕迹,通过在这里找出有问题的sql语句并进行修改,再反复运行这个sql脚本,直到所以有问题的sql都处理完毕,这就是对Oracle数据库在sql上面的最好的优化,可以保证不会因为程序员的sql语句问题导致Oracle数据库的性能问题。

共享池主要由库缓冲区(共享SQL区和PL/SQL区)和数据字典缓冲区组成。

select * from v$sgastat; --显式SGA的状态信息。

有的人写的SQL语句非常复杂,嵌套了好几层,SQL语句本身写的很差,就有可能会占用很大的SQL区域。

这是我从Oracle Metalink里面摘下来的:

引用
If the SHARED_POOL_SIZE is large enough, most ORA-04031 errors are a result of  dynamic sql fragmenting the shared pool.  This can be caused by:

        o Not sharing SQL
        o Making unnecessary parse calls (soft)
        o Not using bind variables
   发表时间:2003-09-16  
其实现实的很多情况是本来不需要那么复杂的sql的时候,由于程序员水平不够,写了那种很糟糕很复杂的sql,造成的数据库性能问题。

另外还有一个常识问题,却很容易被忽略。比如:

select * from table_name where id = 1; 
select * from table_name where id = 2; 
对于这种带参数的sql,id = ? 这个地方叫做站位符(Placeholder)。

拿PHP为例,很多人喜欢这样写代码

$sql = "select * from table_name where id = "; 
$id=1; 
$stmt = ociparse($conn,$sql.$id);; 
ociexecute($stmt);; 
...... 
$id = 2; 
$stmt = ociparse($conn,$sql.$id);; 
ociexecute($stmt);; 

拿Java为例,是这样的:
String sql = "select * from table_name where id = "; 
Statement stmt = conn.createStatement();; 

rset = stmt.executeQuery(sql+"1");; 
...... 
rset = stmt.executeQuery(sql+"2");; 


这种写法,对于Oracle数据库来说,完全就是两条不同的sql语句,
select * from table_name where id = 1; 
select * from table_name where id = 2; 
每次查询都要进行sql语句的执行解析,并且每个sql都会分配一个区域来存放sql解析后的二进制可执行代码。试想,要是id不同的10万个sql呢?Oracle就会分配10万个sql区域来分别存放10万个这样的id不同的sql语句。对于一个数据库驱动的Web网站这样情况下,SGA开的再大,也会很快被耗尽share pool的,最后报一个ORA-4031错误。数据库就连接不上了,只好重起。

正确的写法应该是:

$stmt = ociparse($conn,"select * from table_name where id = :id");; 
ocibindbyname($stmt,":id",&$id, 12);; 

$id =1; 
ociexecute($stmt);; 
... 
$id = 2; 
ociexecute($stmt);; 


PreparedStatement pstmt = conn.prepareStatement("select * from table_name where id = ?");; 

pstmt.setInt(1,1);; 
rset = pstmt.executeQuery();; 
... 
pstmt.setInt(1,2);; 
rset = pstmt.executeQuery();; 

这样Oracle数据库就知道你实际上用的都是同一条sql语句,会以这样的形式:
select * from table_name where id = :1
解析执行后存放在sql区域里面,当以后再有一样的sql的时候,把参数替换一下,就立刻执行,不需要再解析sql了。既加快了sql执行速度,也不会占有过多SGA的share pool。

可惜的是,很多程序员明知道这个问题,却意识不到问题的严重性,因为上面那种写法,编程的时候很灵活,sql语句可以动态构造,实现起来很容易,后面那种写法,sql语句是写死的,参数不能再变了,编程经常会非常麻烦。

很多数据库的性能问题都是这样造成的。

有兴趣在一个生产系统中,用上面sql检查一下,看看是否选择出来的是否l有很多都是一样的sql语句,只是参数不同,如果是这样的话,就说明程序员的代码写的有问题。
0 请登录后投票
   发表时间:2006-03-02  
不好意思,我照书抄了一段, 拷贝下来就节约时间了。下面的语句可以用来查看执行计划,写复杂sql经常会用到的。

delete from plan_table where STATEMENT_ID='TEST';

explain plan
set Statement_ID='TEST'
for
   你的sql语句
;

set pagesize 10000
set wrap off
column PLAN_PLUS_EXP format a120
set linesize 120

select ID ID_plus_exp,
Parent_ID parent_id_plus_exp,
LPAD(' ',2*(level-1))||
Operation||
DECODE(other_tag, null, '', '*')||
DECODE(options, null, '', ' ('||options||')')||
DECODE(object_name, null, '', ' of '''||object_name||'''')||
DECODE(object_type, null, '', ' '||object_type||')')||
DECODE(id, 0, decode(optimizer, null, '', ' optimizer='||optimizer))||
DECODE(cost, null, '', ' (cost='||cost||
DECODE(cardinality, null, '' ,' card='||cardinality)||
DECODE(bytes, null, '', ' bytes='||bytes)||')') plan_plus_exp /*,object_node object_node_plus_exp*/
from PLAN_TABLE
start with ID=0 and Statement_ID='TEST'
connect by prior ID=Parent_ID and Statement_ID='TEST'
order by ID, Position;
0 请登录后投票
   发表时间:2006-03-03  
robbin 写道
这种写法,对于Oracle数据库来说,完全就是两条不同的sql语句,
select * from table_name where id = 1; 
select * from table_name where id = 2; 
每次查询都要进行sql语句的执行解析,并且每个sql都会分配一个区域来存放sql解析后的二进制可执行代码。试想,要是id不同的10万个sql呢?Oracle就会分配10万个sql区域来分别存放10万个这样的id不同的sql语句。对于一个数据库驱动的Web网站这样情况下,SGA开的再大,也会很快被耗尽share pool的,最后报一个ORA-4031错误。数据库就连接不上了,只好重起。


呵呵,所以sun才从statement中再继承出来一个PreparedStatement.
0 请登录后投票
   发表时间:2006-03-03  
请教一下 如果用的是ibatis呢
前段时间的确遇到数据库总是当掉的情况  正愁找不到毛病呢
0 请登录后投票
   发表时间:2006-03-26  
我想这是robbin肯定在多年前的一个误解吧。
0 请登录后投票
   发表时间:2006-03-27  
每个优秀的dev都应该看的书:
《Expert Oracle Database Architecture 9i and 10g Programming Techniques and Solutions》
robbin你讲这点皮毛还不如直接推荐这本书。
0 请登录后投票
   发表时间:2006-03-29  
box 写道
每个优秀的dev都应该看的书:
《Expert Oracle Database Architecture 9i and 10g Programming Techniques and Solutions》
robbin你讲这点皮毛还不如直接推荐这本书。


哦?先去网上查看下评论看看是否值得购买
0 请登录后投票
   发表时间:2006-04-24  
这本书确实不错,不过国内买不到哦
0 请登录后投票
论坛首页 综合技术版

跳转论坛:
Global site tag (gtag.js) - Google Analytics