你所不知道的提高spring+hibernate性能的一个方法

在spring + hibernate的应用中，你监控mysql日志，你会发现大量的log如下：

                 158268 Query       SET autocommit=1
                 158268 Query       SET autocommit=1
                 158268 Query       SET autocommit=1
                 158268 Query       SET autocommit=0
                 158268 Query       commit
                 158268 Query       SET autocommit=1
                 158268 Query       SET autocommit=1
                 158268 Query       SET autocommit=1
                 158268 Query       SET autocommit=0
                 158268 Query       commit

 另外，你如果看mysqlreport，你会发现set_option和commt几乎占了mysql query的一半！！

 

原因是？

我们先看第一个问题：

                 158268 Query       SET autocommit=0
                 158268 Query       commit

 这种日志产生的原因是hibernate查询时，如果所请求的对象在cache中，那么hibernate仍然会向数据库发出这样的两个sql语句。

再来看第二个问题

158268 Query       SET autocommit=1

 这是因为当connection 被放回conn pool时，conn pool会恢复此连接取出时的autocommit状态。一般连接池里面的autocommit状态为true，所以每个查询都会紧跟着一个set autocommit＝1。

 

 

 

 

对第一个问题我们的解决方案：

那就是利用LazyConnectionDataSourceProxy

这个conn 代理的作用就是，只有当确实有必要时，他它向DB发出查询。一切没有必要的set autocommit=0 commit语句都不会发向数据库。

此class的详细作用请参见spring 文档

example配置如下:

 

<bean id="dataSourceTarget" class="com.mchange.v2.c3p0.ComboPooledDataSource" destroy-method="close">
  <property name="driverClass"><value>com.mysql.jdbc.Driver</value></property>
  <property name="jdbcUrl"><value>jdbc:mysql
://localhost:3306/imagedb</value></property>
  <property name="user"><value>admin</value></property>
  <property name="password"><value></value></property>

 <property name="initialPoolSize" value="60" />
        <property name="minPoolSize" value="50" />
        <property name="maxPoolSize" value="80" />
        <property name="maxIdleTime" value="7200" />

        <property name="idleConnectionTestPeriod" value="360" />
        <property name="preferredTestQuery" value="select 1" />
        <property name="acquireIncrement" value="5" />
        <property name="acquireRetryAttempts" value="50" />
        <property name="acquireRetryDelay" value="1000" />
        <property name="breakAfterAcquireFailure" value="true" />

        <!--property name="checkoutTimeout" value="1000" /-->

        <property name="autoCommitOnClose" value="false" />
        <property name="forceIgnoreUnresolvedTransactions" value="false" />
        <property name="unreturnedConnectionTimeout" value="1000" />

        <property name="maxStatements" value="0" />
        <property name="maxStatementsPerConnection" value="0" />

        <property name="testConnectionOnCheckin" value="true" />
        <property name="testConnectionOnCheckout" value="false" />
        <property name="usesTraditionalReflectiveProxies" value="false" />

        <property name="numHelperThreads" value="5" />
</bean>

<bean id="dataSource" class="org.springframework.jdbc.datasource.LazyConnectionDataSourceProxy">
  <property name="targetDataSource"><ref local="dataSource"/></property>
</bean>

第二个问题的解决方案：

通过conn pool 的jdbc url把autocommit设为false来解决，不过mysql driver好像不支持这个设置。

 

 

另外，如果你使用的是mysql，那么第一个问题还有一个更简单的解决方案，那就是在jdbcUrl中加入

useLocalSessionState=true

这可以达到和

LazyConnectionDataSourceProxy

一样的效果

评论

20 楼 chinaway 2009-11-13  

<div class="quote_title">niyunjiu 写道</div>
<div class="quote_div">
<div class="quote_title">孤风浪客 写道</div>
<div class="quote_div">
<div class="quote_title">niyunjiu 写道</div>
<div class="quote_div">第二个问题的解决方案：
<p>通过conn pool 的jdbc url把autocommit设为true来解决，不过mysql driver好像不支持这个设置。</p>
</div>
<p> </p>
<p>autocommit在实际应用中会带来不少的问题。</p>
</div>
<p>不好意思，是我的笔误，应该是设为false才对。主贴已经更新</p>
</div>
<p> </p>
<p>mysql5以上是支持的，需要创建InnoDb的数据库和数据表</p>

19 楼 niyunjiu 2009-10-22  

<div class="quote_title">孤风浪客 写道</div>
<div class="quote_div">
<div class="quote_title">niyunjiu 写道</div>
<div class="quote_div">第二个问题的解决方案：
<p>通过conn pool 的jdbc url把autocommit设为true来解决，不过mysql driver好像不支持这个设置。</p>
</div>
<p> </p>
<p>autocommit在实际应用中会带来不少的问题。</p>
</div>
<p>不好意思，是我的笔误，应该是设为false才对。主贴已经更新</p>

18 楼 值得深入 2009-10-22  

性能能提高多少呢?
最好能有个实例:>

17 楼 孤风浪客 2009-10-22  

<div class="quote_title">niyunjiu 写道</div>
<div class="quote_div">第二个问题的解决方案：
<p>通过conn pool 的jdbc url把autocommit设为true来解决，不过mysql driver好像不支持这个设置。</p>
</div>
<p> </p>
<p>autocommit在实际应用中会带来不少的问题。</p>

16 楼 凤舞凰扬 2009-10-21  

  不是太清楚hibernate，但是有些奇怪，hibernate没有只读链接么？对于query, 为什么需要去设置autocommit =0这样的情况了？ 是否是人为地开始了一个新的事务？

15 楼 whaosoft 2009-10-21  

这种情况没试过，改天试下

14 楼 niyunjiu 2009-10-21  

发向DB的sql少了，你说性能会不会提高？
当然，提高多少是另一回事

13 楼 hua0424 2009-10-21  

关键是看效果，你这样改只是监控到的SQL少了，到底性能有没有提高，提高了多少，还需要测试。一个优化方案没有经过实践，只停留在理论上的“应该会有性能提升”，是没有实用意义的，也不值得去实施

12 楼 ch_space 2009-10-21  

niyunjiu 写道

经过测试，主贴我已经更新了!!

你有没有测试这样优化过的性能改善情况？就这样简单的看看mysql的日志就说明情况了？建议将测试后的数据拿出来才有说服力。。。

11 楼 niyunjiu 2009-10-21  

经过测试，主贴我已经更新了!!
这只是一个dataSource的代理类，与连接池无关，只要是dataSource都可以

10 楼 niyunjiu 2009-10-21  

plantegg 写道

这个问题我也没碰到过

不过我们是Spring+Hibernate+C3P0

不知道楼主知不知道对于c3p0这里有啥好解决办法吗？

鉴于大家使用c3p0比较多，我已经将例子改为c3p0了。
这个和使用哪个连接池没有关系，都可以。

9 楼 li445970924 2009-10-21  

ych19850810 写道

<bean id="dataSourceTarget" class="org.springframework.jdbc.datasource.DriverManagerDataSource">  
    <property name="driverClassName"><value>${db2.uap.driverClassName}</value></property>  
    <property name="url"><value>${db2.uap.url}</value></property>  
    <property name="username"><value>${db2.uap.username}</value></property>  
    <property name="password"><value>${db2.uap.password}</value></property> 
    </bean>  
 
<bean id="dataSource" class="org.springframework.jdbc.datasource.LazyConnectionDataSourceProxy">  
  <property name="targetDataSource"><ref local="dataSourceTarget"/></property>  
</bean> 

大侠这个是不是就可以支持多种数据库了   ${这里面的是从属性文件里面取的吧}  具体咋实现的啊....

8 楼 wenson 2009-10-21  

不知在dbcp或c3p0连接池是否也可以用这种优化方法？

7 楼 kjj 2009-10-20  

厉害，学习了，明天去改改！！！

6 楼 ych19850810 2009-10-20  

<bean id="dataSourceTarget" class="org.springframework.jdbc.datasource.DriverManagerDataSource">  
    <property name="driverClassName"><value>${db2.uap.driverClassName}</value></property>  
    <property name="url"><value>${db2.uap.url}</value></property>  
    <property name="username"><value>${db2.uap.username}</value></property>  
    <property name="password"><value>${db2.uap.password}</value></property> 
    </bean>  
 
<bean id="dataSource" class="org.springframework.jdbc.datasource.LazyConnectionDataSourceProxy">  
  <property name="targetDataSource"><ref local="dataSourceTarget"/></property>  
</bean> 

5 楼 xly_971223 2009-10-20  

这玩意真管用？
其他的连接池框架没实现吗

4 楼 d-jasonlee 2009-10-20  

引用

在sprint + hibernate的应用中，你监控mysql日志，你会发现大量的log如下：

楼主这里有个词打错了 应该是“spring”

3 楼 liuye 2009-10-20  

org.springframework.jdbc.datasource.DriverManagerDataSource并没有提供连接池的功能，只能作作简单的单机连接测试吧。

2 楼 plantegg 2009-10-20  

这个问题我也没碰到过

不过我们是Spring+Hibernate+C3P0

不知道楼主知不知道对于c3p0这里有啥好解决办法吗？

1 楼 paskaa 2009-10-20  

好文章，学习了