spring的DriverManagerDataSource与apache的BasicDataSource，ComboPooledDataSource

 

情况是这样的。。。 
org.apache.tomcat.util.threads.ThreadPool logFull 
严重: All threads (150) are currently busy, waiting. Increase maxThreads (150) or check the servlet status 

重新启动服务器之后，问题依然存在。 
分析得出以下可能情况 
1.连接数达到了150的最大上限 
2.服务器端响应用户请求的时间过长导致 
3.连接池的配置数出了问题 

分析： 
1.1个用户访问是OK的，当用2个用户对localhost进行访问，所以根本不可能达到并发访问线程的150的上限，所以应该不是数据库的原因,排除了第一种可能 
2.之前访问的JSP已经经过多次访问，所以不可能是第一次访问编译，运行而导致的请求时间过长的原因，第二情况也否定。 

到此，经过分析可以确定的是连接池出了问题...  

首先有2个知识点需要再弄的更清楚一些 

DriverManager与DataSource  连接数据库有何区别?  
        DriverManager传统的jdbc连接，通过Class.forName("XXX"),的办法注册之后，就可以DriverManager.getConnection()获得连接了。 

        DataSource是建立在JNDI服务基础上的,需要application server配置datasource.首先需要注册一个DataSource(一般在/META-INF/context.xml下)然后在 web.xml文件中引用这个DataSource,就可以DataSource.getConnection()获得连接,具体操作参考(tomcat 目录里的JNDI Resources小节) 

DataSource 与 DBCP pool(连接池) 的区别？  
        J2EE 服务器启动时会建立一定数量的池连接，并一直维持不少于此数目的池连接。客户端程序需要连接时，池驱动程序会返回一个未使用的池连接并将其表记为忙。如果 当前没有空闲连接，池驱动程序就新建一定数量的连接，新建连接的数量有配置参数决定。当使用的池连接调用完成后，池驱动程序将此连接表记为空闲，其他调用 就可以使用这个连接。 
相当于是优化了DataSource的一种工具 

跟数据库连接的部分是通过Spring的DataSource JDBC连接的,配置的XML内容如下: 

<bean id=
"propertyConfigurer"
class
=
"org.springframework.beans.factory.config.PropertyPlaceholderConfigurer"
>
<!--PropertyPlaceholderConfigurer类来读取xxx.properties配置文件信息,以key和value的形式-->
<property name="locations"
>
    <list>
        <value>
          /WEB-INF/classes/config/pkm/environment/jdbc.properties
        </value>
        <value>
          <!--多个xxx.properties文件-->
        </value>
    </list>
</property>
</bean>

<!--事实上是因为DriverManagerDataSource建立连接是只要有连接就新建一个connection,根本没有连接池的作用-->
<!--两种不同的DataSource-->
<!--单纯的DataSource-->
<bean id="pkmDataSource"
class
=
"org.springframework.jdbc.datasource.DriverManagerDataSource"
>
    <property name="driverClassName"
>
        <value>${pkm.jdbc.driverClassName}</value>
        <!--${pkm.jdbc.driverClassName}是jdbc.properties文件 中的key-->
    </property>
    <property name="url"
>
        <value>${pkm.jdbc.url}</value>
    </property>
    <property name="username"
>
        <value>${pkm.jdbc.username}</value>
    </property>
    <property name="password"
>
        <value>${pkm.jdbc.password}</value>
    </property>
</bean>

<!--连接池-->
<bean id="pkmDataSource"
class
=
"org.apache.commons.dbcp.BasicDataSource"
 destroy-method=
"close"
 lazy-init=
"false"
>
    <property name="driverClassName"
 value=
"${pkm.jdbc.driverClassName}"
/>
    <property name="url"
 value=
"${pkm.jdbc.url}"
/>
    <property name="username"
 value=
"${pkm.jdbc.username}"
/>
    <property name="password"
 value=
"${pkm.jdbc.password}"
/>
    <property name="initialSize"
 value=
"5"
/>
    <property name="maxActive"
 value=
"10"
/>
    <property name="maxWait"
 value=
"60000"
/>
    <property name="poolPreparedStatements"
 value=
"true"
/>
</bean>

<bean id="propertyConfigurer" 
class="org.springframework.beans.factory.config.PropertyPlaceholderConfigurer">
<!--PropertyPlaceholderConfigurer类来读取xxx.properties配置文件信息,以key和value的形式-->
<property name="locations">
    <list>
        <value>
          /WEB-INF/classes/config/pkm/environment/jdbc.properties
        </value>
        <value>
          <!--多个xxx.properties文件-->
        </value>
    </list>
</property>
</bean>
<!--事实上是因为DriverManagerDataSource建立连接是只要有连接就新建一个connection,根本没有连接池的作用-->
<!--两种不同的DataSource-->
<!--单纯的DataSource-->
<bean id="pkmDataSource" 
class="org.springframework.jdbc.datasource.DriverManagerDataSource">
    <property name="driverClassName">
        <value>${pkm.jdbc.driverClassName}</value>
        <!--${pkm.jdbc.driverClassName}是jdbc.properties文件 中的key-->
    </property>
    <property name="url">
        <value>${pkm.jdbc.url}</value>
    </property>
    <property name="username">
        <value>${pkm.jdbc.username}</value>
    </property>
    <property name="password">
        <value>${pkm.jdbc.password}</value>
    </property>
</bean>
<!--连接池-->
<bean id="pkmDataSource" 
class="org.apache.commons.dbcp.BasicDataSource" destroy-method="close" lazy-init="false">
    <property name="driverClassName" value="${pkm.jdbc.driverClassName}"/>
    <property name="url" value="${pkm.jdbc.url}"/>
    <property name="username" value="${pkm.jdbc.username}"/>
    <property name="password" value="${pkm.jdbc.password}"/>
    <property name="initialSize" value="5"/>
    <property name="maxActive" value="10"/>
    <property name="maxWait" value="60000"/>
    <property name="poolPreparedStatements" value="true"/>  
</bean>

 

 所以问题就出在这里,当使用BasicDataSource后问题不在出现,所以是连接数量造成的,在访问数量大,并发的情况下,毫无疑问是要选择连接池的,因为有连接池的功能,无论是效率还是在资源利用率上都优于DriverManagerDataSource

        从而从根本上了解了spring的DriverManagerDataSource与apacheBasicDataSource之间的区别.

有时候可能需要配置Jndi服务

<bean id=
"pkmDataSource"
class
=
"org.springframework.jndi.JndiObjectFactoryBean"
>
    <property name="jndiName"
 value=
"pkmDataSource"
/>
</bean>
<!--
这样的话部署的时候，需要在容器中（tomcat,weblogic）配置JDBC Connection Pool(DBCP)连接池
-->

<bean id="pkmDataSource" 
class="org.springframework.jndi.JndiObjectFactoryBean">
    <property name="jndiName" value="pkmDataSource"/> 
</bean>
<!--
这样的话部署的时候，需要在容器中（tomcat,weblogic）配置JDBC Connection Pool(DBCP)连接池
-->

这三种连接方式常常使用，也容易混淆，选择其中的某一种，就需要看具体环境来配置了。  

PS：jdbc.properties文件中的配置如下

pkm.jdbc.driverClassName=oracle.jdbc.OracleDriver
pkm.jdbc.url=jdbc\:oracle\:thin\:@109
.52.
20.31
\:
1521
\:orcl<!--把符号做转译-->
pkm.jdbc.name=pkmuser
pkm.jdbc.password=dbl0gin
pkm.jdbc.dataSource=pkmDataSource

pkm.jdbc.driverClassName=oracle.jdbc.OracleDriver
pkm.jdbc.url=jdbc\:oracle\:thin\:@109.52.20.31\:1521\:orcl<!--把符号做转译-->
pkm.jdbc.name=pkmuser
pkm.jdbc.password=dbl0gin
pkm.jdbc.dataSource=pkmDataSource

关于Spring整合发现的一些问题。  收藏

 

Spring提供了两个这样的数据源（都位于org.springframework.jdbc.datasource程序包里）：
DriverManagerDataSource：在每个连接请求时都新建一个连接。与DBCP的BasicDataSource不同，DriverManagerDataSource提供的连接没有进行池管理。
SingleConnectionDataSource：在每个连接请求时都返回同一个连接。虽然它不同严格意义上的池管理数据源，但我们可以把它看作只有一个连接的池。
对两个数据源的配置都类似于配置DBCP的BasicDataSource
区别在于由于DriverManagerDataSource和SingleConnectionDataSource都没有提供连接池，所以在此没有设置池配置属性。
虽然这两个数据源都对于小程序来说是很不错的，而且还在不断发展，但把它们用于生产程序还是需要认真考虑的。

SingleConnectionDataSource 只使用一个数据库连接，所以不适合用于多线程程序。而 DriverMangerDataSource虽然能够支持多线程，但它会在每次连接请求时都新建一个连接，这是以性能为代价的。由于这些限制，我们强烈 建议应该使用数据源池。

在通过数据源与数据库建立连接之后，我们就要实际访问数据库了，而最基本的方式就是使用JDBC，现在我们就来看一看Spring如何让使用简单的JDBC更加简便。
 Spring在第三方依赖包中包含了两个数据源的实现类包，其一是Apache的DBCP，其二是 C3P0。可以在Spring配置文件中利用这两者中任何一个配置数据源。

DBCP数据源 
     DBCP 类包位于 /lib/jakarta-commons/commons-dbcp.jar，DBCP是一个依赖 Jakarta commons- pool对象池机制的数据库连接池，所以在类路径下还必须包括/lib/jakarta- commons/commons-pool.jar。下面是使 用DBCP配置MySql数据源的配置片断：

xml 代码
<bean id="dataSource" class="org.apache.commons.dbcp.BasicDataSource"        
         destroy-method="close">        
     <property name="driverClassName" value="com.mysql.jdbc.Driver" />       
     <property name="url" value="jdbc:mysql://localhost:3309/sampledb" />       
     <property name="username" value="root" />       
     <property name="password" value="1234" />       
bean>  

BasicDataSource提供了close()方法关闭数据源，所以必须设定destroy-method=”close”属性， 以便Spring容器关闭时，数据源能够正常关闭。除以上必须的数据源属性外，还有一些常用的属性： 
     defaultAutoCommit：设置从数据源中返回的连接是否采用自动提交机制，默认值为 true； 
     defaultReadOnly：设置数据源是否仅能执行只读操作， 默认值为 false； 
     maxActive：最大连接数据库连接数，设置为0时，表示没有限制； 
     maxIdle：最大等待连接中的数量，设置为0时，表示没有限制； 
     maxWait：最大等待秒数，单位为毫秒， 超过时间会报出错误信息； 
     validationQuery：用于验证连接是否成功的查询SQL语句，SQL语句必须至少要返回一行数据， 如你可以简单地设置为：“select count(*) from user”； 
     removeAbandoned：是否自我中断，默认是 false ； 
     removeAbandonedTimeout：几秒后数据连接会自动断开，在removeAbandoned为true，提供该值； 
     logAbandoned：是否记录中断事件， 默认为 false；

C3P0数据源 
     C3P0 是一个开放源代码的JDBC数据源实现项目，它在lib目录中与Hibernate一起发布，实现了JDBC3和JDBC2扩展规范说明的 Connection 和Statement 池。C3P0类包位于/lib/c3p0/c3p0-0.9.0.4.jar。下面是使用C3P0配置一 个 oracle数据源：

xml 代码
<bean id="dataSource" class="com.mchange.v2.c3p0.ComboPooledDataSource"        
         destroy-method="close">       
     <property name="driverClass" value=" oracle.jdbc.driver.OracleDriver "/>       
     <property name="jdbcUrl" value=" jdbc:oracle:thin:@localhost:1521:ora9i "/>       
     <property name="user" value="admin"/>       
     <property name="password" value="1234"/>       
bean>  

ComboPooledDataSource和BasicDataSource一样提供了一个用于关闭数据源的close()方法，这样我们就可以保证Spring容器关闭时数据源能够成功释放。 
     C3P0拥有比DBCP更丰富的配置属性，通过这些属性，可以对数据源进行各种有效的控制： 
     acquireIncrement：当连接池中的连接用完时，C3P0一次性创建新连接的数目； 
     acquireRetryAttempts：定义在从数据库获取新连接失败后重复尝试获取的次数，默认为30； 
     acquireRetryDelay：两次连接中间隔时间，单位毫秒，默认为1000； 
     autoCommitOnClose：连接关闭时默认将所有未提交的操作回滚。默认为false； 
     automaticTestTable： C3P0将建一张名为Test的空表，并使用其自带的查询语句进行测试。如果定义了这个参数，那么属性preferredTestQuery将被忽略。 你 不能在这张Test表上进行任何操作，它将中为C3P0测试所用，默认为null； 
     breakAfterAcquireFailure： 获取连接失败将会引起所有等待获取连接的线程抛出异常。但是数据源仍有效保留，并在下次调    用getConnection()的时候继续尝试获取连 接。如果设为true，那么在尝试获取连接失败后该数据源将申明已断开并永久关闭。默认为 false； 
     checkoutTimeout：当连接池用完时客户端调用getConnection()后等待获取新连接的时间，超时后将抛出SQLException，如设为0则无限期等待。单位毫秒，默认为0； 
     connectionTesterClassName： 通过实现ConnectionTester或QueryConnectionTester的类来测试连接，类名需设置为全限定名。默认为 com.mchange.v2.C3P0.impl.DefaultConnectionTester； 
     idleConnectionTestPeriod：隔多少秒检查所有连接池中的空闲连接，默认为0表示不检查； 
     initialPoolSize：初始化时创建的连接数，应在minPoolSize与maxPoolSize之间取值。默认为3； 
     maxIdleTime：最大空闲时间，超过空闲时间的连接将被丢弃。为0或负数则永不丢弃。默认为0； 
     maxPoolSize：连接池中保留的最大连接数。默认为15； 
     maxStatements： JDBC的标准参数，用以控制数据源内加载的PreparedStatement数量。但由于预缓存的Statement属 于单个Connection 而不是整个连接池。所以设置这个参数需要考虑到多方面的因素，如果maxStatements与 maxStatementsPerConnection 均为0，则缓存被关闭。默认为0； 
     maxStatementsPerConnection：连接池内单个连接所拥有的最大缓存Statement数。默认为0； 
     numHelperThreads：C3P0是异步操作的，缓慢的JDBC操作通过帮助进程完成。扩展这些操作可以有效的提升性能，通过多线程实现多个操作同时被执行。默认为3； 
     preferredTestQuery：定义所有连接测试都执行的测试语句。在使用连接测试的情况下这个参数能显著提高测试速度。测试的表必须在初始数据源的时候就存在。默认为null； 
     propertyCycle： 用户修改系统配置参数执行前最多等待的秒数。默认为300； 
     testConnectionOnCheckout： 因性能消耗大请只在需要的时候使用它。如果设为true那么在每个connection提交的时候都 将校验其有效性。建议使用 idleConnectionTestPeriod或automaticTestTable 
等方法来提升连接测试的性能。默认为false； 
     testConnectionOnCheckin：如果设为true那么在取得连接的同时将校验连接的有效性。默认为false。

读配置文件的方式引用属性：

<bean id="propertyConfigurer"      
         class="org.springframework.beans.factory.config.PropertyPlaceholderConfigurer">       
     <property name="location" value="/WEB-INF/jdbc.properties"/>       
bean>       
<bean id="dataSource" class="org.apache.commons.dbcp.BasicDataSource"        
         destroy-method="close">       
     <property name="driverClassName" value="${jdbc.driverClassName}" />       
     <property name="url" value="${jdbc.url}" />       
     <property name="username" value="${jdbc.username}" />       
     <property name="password" value="${jdbc.password}" />       
bean>   

     在jdbc.properties属性文件中定义属性值： 
     jdbc.driverClassName= com.mysql.jdbc.Driver 
     jdbc.url= jdbc:mysql://localhost:3309/sampledb 
     jdbc.username=root 
     jdbc.password=1234 
     提示 经常有开发者在${xxx}的前后不小心键入一些空格，这些空格字符将和变量合并后作为属性的值。如： 的属性配置项，在前后都有空格，被解析后，username的值为“ 1234 ”，这将造成最终的错误，因此需要特别小心。

获取JNDI数据源 
     如果应用配置在高性能的应用服务器（如WebLogic或Websphere等）上，我们可能更希望使用应用服务器本身提供的数据源。应用服务器的数据源 使用JNDI开放调用者使用，Spring为此专门提供引用JNDI资源的JndiObjectFactoryBean类。下面是一个简单的配置：

xml 代码
<bean id="dataSource" class="org.springframework.jndi.JndiObjectFactoryBean">       
     <property name="jndiName" value="java:comp/env/jdbc/bbt"/>       
bean>  

通过jndiName指定引用的JNDI数据源名称。 
     Spring 2.0为获取J2EE资源提供了一个jee命名空间，通过jee命名空间，可以有效地简化J2EE资源的引用。下面是使用jee命名空间引用JNDI数据源的配置：

xml 代码
<beans xmlns=http://www.springframework.org/schema/beans     
xmlns:xsi=http://www.w3.org/2001/XMLSchema-instance     
xmlns:jee=http://www.springframework.org/schema/jee     
xsi:schemaLocation="http://www.springframework.org/schema/beans       
http://www.springframework.org/schema/beans/spring-beans-2.0.xsd       
http://www.springframework.org/schema/jee      
http://www.springframework.org/schema/jee/spring-jee-2.0.xsd ">       
<jee:jndi-lookup id="dataSource" jndi-name=" java:comp/env/jdbc/bbt"/>       
beans>  

Spring的数据源实现类 
     Spring 本身也提供了一个简单的数据源实现类DriverManagerDataSource ，它位于 org.springframework.jdbc.datasource包中。这个类实现了javax.sql.DataSource接口，但 它并没 有提供池化连接的机制，每次调用getConnection()获取新连接时，只是简单地创建一个新的连接。因此，这个数据源类比较适合在单元测试 或简 单的独立应用中使用，因为它不需要额外的依赖类。 
      下面，我们来看一下DriverManagerDataSource的简单使用：当然，我们也可以通过配置的方式直接使用DriverManagerDataSource。

java 代码
DriverManagerDataSource ds = new DriverManagerDataSource ();       
ds.setDriverClassName("com.mysql.jdbc.Driver");       
ds.setUrl("jdbc:mysql://localhost:3309/sampledb");       
ds.setUsername("root");       
ds.setPassword("1234");       
Connection actualCon = ds.getConnection();  

小结

     不管采用何种持久化技术，都需要定义数据源。Spring附带了两个数据源的实现类包，你可以自行选择进行定义。在实际部署时，我们可能会直接采用应用服 务器本身提供的数据源，这时，则可以通过JndiObjectFactoryBean或jee命名空间引用JNDI中的数据源。

DBCP与C3PO配置的区别：

C3PO ：

xml 代码

<bean id="dataSource" class="com.mchange.v2.c3p0.ComboPooledDataSource" destroy-method="close">   
     <property name="driverClass">   
         <value>oracle.jdbc.driver.OracleDrivervalue>   
     property>   
     <property name="jdbcUrl">              
         <value>jdbc:oracle:thin:@10.10.10.6:1521:DataBaseNamevalue>   
      property>   
     <property name="user">   
         <value>testAdminvalue>   
     property>   
     <property name="password">   
         <value>123456value>   
     property>   
bean>  

DBCP：

xml 代码
<bean id="dataSource" class="org.apache.commons.dbcp.BasicDataSource" destroy-method="close">   
     <property name="driverClassName">   
         <value>oracle.jdbc.driver.OracleDrivervalue>   
     property>   
     <property name="url">              
         <value>jdbc:oracle:thin:@10.10.10.6:1521:DataBaseNamevalue>   
      property>   
     <property name="username">   
         <value>testAdminvalue>   
     property>   
     <property name="password">   
         <value>123456value>   
     property>   
bean>