`
liudaoru
  • 浏览: 1582800 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

Java 的JDBC 数据库连接池实现方法[z]

    博客分类:
  • java
阅读更多

From: http://dev.csdn.net/develop/article/25/article/21/21140.shtm

  虽然 J2EE 程序员一般都有现成的应用服务器所带的JDBC 数据库连接池,不过对于开发一般的 Java Application 、 Applet 或者 JSP、velocity 时,我们可用的JDBC 数据库连接池并不多,并且一般性能都不好。 Java 程序员都很羡慕 Windows ADO ,只需要 new Connection 就可以直接从数据库连接池中返回 Connection。并且 ADO Connection 是线程安全的,多个线程可以共用一个 Connection, 所以 ASP 程序一般都把 getConnection 放在 Global.asa 文件中,在 IIS 启动时建立数据库连接。ADO 的 Connection 和 Result 都有很好的缓冲,并且很容易使用。

其实我们可以自己写一个JDBC 数据库连接池。写 JDBC connection pool 的注意事项有:

1. 有一个简单的函数从连接池中得到一个 Connection。
2. close 函数必须将 connection 放回 数据库连接池。
3. 当数据库连接池中没有空闲的 connection, 数据库连接池必须能够自动增加 connection 个数。
4. 当数据库连接池中的 connection 个数在某一个特别的时间变得很大,但是以后很长时间只用其中一小部分,应该可以自动将多余的 connection 关闭掉。
5. 如果可能,应该提供debug 信息报告没有关闭的 new Connection 。

如果要 new Connection 就可以直接从数据库连接池中返回 Connection, 可以这样写( Mediator pattern ) (以下代码中使用了中文全角空格):

public class EasyConnection implements java.sql.Connection{
  private Connection m_delegate = null;

  public EasyConnection(){
    m_delegate = getConnectionFromPool();
  }

  public void close(){
    putConnectionBackToPool(m_delegate);
  }

  public PreparedStatement prepareStatement(String sql) throws SQLException{
    m_delegate.prepareStatement(sql);
  }

  //...... other method

}

看来并不难。不过不建议这种写法,因为应该尽量避免使用 Java Interface, 关于 Java Interface 的缺点我另外再写文章讨论。大家关注的是 Connection Pool 的实现方法。下面给出一种实现方法。

import java.sql.*;
import java.lang.reflect.*;
import java.util.*;
import java.io.*;

public class SimpleConnetionPool {
  private static LinkedList m_notUsedConnection = new LinkedList();
  private static HashSet m_usedUsedConnection = new HashSet();
  private static String m_url = "";
  private static String m_user = "";
  private static String m_password = "";
  static final boolean DEBUG = true;
  static private long m_lastClearClosedConnection = System.currentTimeMillis();
  public static long CHECK_CLOSED_CONNECTION_TIME = 4 * 60 * 60 * 1000; //4 hours

  static {
    initDriver();
  }

  private SimpleConnetionPool() {
  }

  private static void initDriver() {
    Driver driver = null;
    //load mysql driver
    try {
      driver = (Driver) Class.forName("com.mysql.jdbc.Driver").newInstance();
      installDriver(driver);
    } catch (Exception e) {
    }

    //load postgresql driver
    try {
      driver = (Driver) Class.forName("org.postgresql.Driver").newInstance();
      installDriver(driver);
    } catch (Exception e) {
    }
  }

  public static void installDriver(Driver driver) {
    try {
      DriverManager.registerDriver(driver);
    } catch (Exception e) {
      e.printStackTrace();
    }
  }


  public static synchronized Connection getConnection() {
    clearClosedConnection();
    while (m_notUsedConnection.size() > 0) {
      try {
        ConnectionWrapper wrapper = (ConnectionWrapper) m_notUsedConnection.removeFirst();
        if (wrapper.connection.isClosed()) {
          continue;
        }
        m_usedUsedConnection.add(wrapper);
        if (DEBUG) {
          wrapper.debugInfo = new Throwable("Connection initial statement");
        }
        return wrapper.connection;
      } catch (Exception e) {
      }
    }
    int newCount = getIncreasingConnectionCount();
    LinkedList list = new LinkedList();
    ConnectionWrapper wrapper = null;
    for (int i = 0; i < newCount; i++) {
      wrapper = getNewConnection();
      if (wrapper != null) {
        list.add(wrapper);
      }
    }
    if (list.size() == 0) {
      return null;
    }
    wrapper = (ConnectionWrapper) list.removeFirst();
    m_usedUsedConnection.add(wrapper);

    m_notUsedConnection.addAll(list);
    list.clear();

    return wrapper.connection;
  }

  private static ConnectionWrapper getNewConnection() {
    try {
      Connection con = DriverManager.getConnection(m_url, m_user, m_password);
      ConnectionWrapper wrapper = new ConnectionWrapper(con);
      return wrapper;
    } catch (Exception e) {
      e.printStackTrace();
    }
    return null;
  }

  static synchronized void pushConnectionBackToPool(ConnectionWrapper con) {
    boolean exist = m_usedUsedConnection.remove(con);
    if (exist) {
      m_notUsedConnection.addLast(con);
    }
  }

  public static int close() {
    int count = 0;

    Iterator iterator = m_notUsedConnection.iterator();
    while (iterator.hasNext()) {
      try {
        ( (ConnectionWrapper) iterator.next()).close();
        count++;
      } catch (Exception e) {
      }
    }
    m_notUsedConnection.clear();

    iterator = m_usedUsedConnection.iterator();
    while (iterator.hasNext()) {
      try {
        ConnectionWrapper wrapper = (ConnectionWrapper) iterator.next();
        wrapper.close();
        if (DEBUG) {
          wrapper.debugInfo.printStackTrace();
        }
        count++;
      } catch (Exception e) {
      }
    }
    m_usedUsedConnection.clear();

    return count;
  }

  private static void clearClosedConnection() {
    long time = System.currentTimeMillis();
    //sometimes user change system time,just return
    if (time < m_lastClearClosedConnection) {
      time = m_lastClearClosedConnection;
      return;
    }
    //no need check very often
    if (time - m_lastClearClosedConnection < CHECK_CLOSED_CONNECTION_TIME) {
      return;
    }
    m_lastClearClosedConnection = time;

    //begin check
    Iterator iterator = m_notUsedConnection.iterator();
    while (iterator.hasNext()) {
      ConnectionWrapper wrapper = (ConnectionWrapper) iterator.next();
      try {
        if (wrapper.connection.isClosed()) {
          iterator.remove();
        }
      } catch (Exception e) {
        iterator.remove();
        if (DEBUG) {
          System.out.println("connection is closed, this connection initial StackTrace");
          wrapper.debugInfo.printStackTrace();
        }
      }
    }

    //make connection pool size smaller if too big
    int decrease = getDecreasingConnectionCount();
    if (m_notUsedConnection.size() < decrease) {
      return;
    }

    while (decrease-- > 0) {
      ConnectionWrapper wrapper = (ConnectionWrapper) m_notUsedConnection.removeFirst();
      try {
        wrapper.connection.close();
      } catch (Exception e) {
      }
    }
  }

  /**
   * get increasing connection count, not just add 1 connection
   * @return count
   */
  public static int getIncreasingConnectionCount() {
    int count = 1;
    int current = getConnectionCount();
    count = current / 4;
    if (count < 1) {
      count = 1;
    }
    return count;
  }

  /**
   * get decreasing connection count, not just remove 1 connection
   * @return count
   */
  public static int getDecreasingConnectionCount() {
    int count = 0;
    int current = getConnectionCount();
    if (current < 10) {
      return 0;
    }
    return current / 3;
  }

  public synchronized static void printDebugMsg() {
    printDebugMsg(System.out);
  }

  public synchronized static void printDebugMsg(PrintStream out) {
    if (DEBUG == false) {
      return;
    }
    StringBuffer msg = new StringBuffer();
    msg.append("debug message in " + SimpleConnetionPool.class.getName());
    msg.append("\r\n");
    msg.append("total count is connection pool: " + getConnectionCount());
    msg.append("\r\n");
    msg.append("not used connection count: " + getNotUsedConnectionCount());
    msg.append("\r\n");
    msg.append("used connection, count: " + getUsedConnectionCount());
    out.println(msg);
    Iterator iterator = m_usedUsedConnection.iterator();
    while (iterator.hasNext()) {
      ConnectionWrapper wrapper = (ConnectionWrapper) iterator.next();
      wrapper.debugInfo.printStackTrace(out);
    }
    out.println();
  }

  public static synchronized int getNotUsedConnectionCount() {
    return m_notUsedConnection.size();
  }

  public static synchronized int getUsedConnectionCount() {
    return m_usedUsedConnection.size();
  }

  public static synchronized int getConnectionCount() {
    return m_notUsedConnection.size() + m_usedUsedConnection.size();
  }

  public static String getUrl() {
    return m_url;
  }

  public static void setUrl(String url) {
    if (url == null) {
      return;
    }
    m_url = url.trim();
  }

  public static String getUser() {
    return m_user;
  }

  public static void setUser(String user) {
    if (user == null) {
      return;
    }
    m_user = user.trim();
  }

  public static String getPassword() {
    return m_password;
  }

  public static void setPassword(String password) {
    if (password == null) {
      return;
    }
    m_password = password.trim();
  }

}

class ConnectionWrapper implements InvocationHandler {
  private final static String CLOSE_METHOD_NAME = "close";
  public Connection connection = null;
  private Connection m_originConnection = null;
  public long lastAccessTime = System.currentTimeMillis();
  Throwable debugInfo = new Throwable("Connection initial statement");

  ConnectionWrapper(Connection con) {
    Class[] interfaces = {java.sql.Connection.class};
    this.connection = (Connection) Proxy.newProxyInstance(
      con.getClass().getClassLoader(),
      interfaces, this);
    m_originConnection = con;
  }

  void close() throws SQLException {
    m_originConnection.close();
  }

  public Object invoke(Object proxy, Method m, Object[] args) throws Throwable {
    Object obj = null;
    if (CLOSE_METHOD_NAME.equals(m.getName())) {
      SimpleConnetionPool.pushConnectionBackToPool(this);
    }
    else {
      obj = m.invoke(m_originConnection, args);
    }
    lastAccessTime = System.currentTimeMillis();
    return obj;
  }
}

使用方法

public class TestConnectionPool{
  public static void main(String[] args) {
    SimpleConnetionPool.setUrl(DBTools.getDatabaseUrl());
    SimpleConnetionPool.setUser(DBTools.getDatabaseUserName());
    SimpleConnetionPool.setPassword(DBTools.getDatabasePassword());

    Connection con = SimpleConnetionPool.getConnection();
    Connection con1 = SimpleConnetionPool.getConnection();
    Connection con2 = SimpleConnetionPool.getConnection();

    //do something with con ...

    try {
      con.close();
    } catch (Exception e) {}

    try {
      con1.close();
    } catch (Exception e) {}

    try {
      con2.close();
    } catch (Exception e) {}

    con = SimpleConnetionPool.getConnection();
    con1 = SimpleConnetionPool.getConnection();
    try {
      con1.close();
    } catch (Exception e) {}

    con2 = SimpleConnetionPool.getConnection();
    SimpleConnetionPool.printDebugMsg();

  }
}

运行测试程序后打印连接池中 Connection 状态, 以及正在使用的没有关闭 Connection 信息。

 

分享到:
评论

相关推荐

    数据库连接池DBCP包.7z

    数据库连接池(Connection Pool)是Java应用程序中管理数据库连接的一种技术,它允许多个并发的应用程序共享有限数量的数据库连接,而不是为每个请求单独创建新的连接。DBCP(Jakarta DBCP,Apache Database ...

    WebSphere配置数据库连接池

    在 WebSphere 中,配置数据库连接池主要涉及三个步骤:配置 JDBC 提供程序、配置数据源以及设置 J2C 认证别名。 首先,我们需要配置 JDBC 提供程序。JDBC(Java Database Connectivity)是 Java 中用于访问数据库的...

    数据库连接池 包含C3P0和Druid.7z

    本资源包包含了两种常见的数据库连接池实现——C3P0和Druid,适用于Java开发环境。 C3P0是一个开源的JDBC连接池,它实现了数据源和JNDI绑定,支持JDBC3规范和JDBC2的标准扩展。C3P0的主要特点包括: 1. **连接池...

    proxool数据库连接池配置

    Proxool是一个轻量级的Java数据库连接池管理工具,它可以帮助开发者更高效地管理和利用数据库连接资源。通过Proxool,可以显著减少数据库连接创建和关闭的开销,从而提升应用程序的性能和响应速度。 #### 二、配置...

    原生servlet+C3P0数据库连接池搭建的商城系统.7z

    总之,这个原生Servlet+C3P0数据库连接池的商城系统,展示了Java Web开发的基本架构和核心技术,包括后端的Servlet编程、数据库连接池管理,以及前端的动态页面渲染。每个部分都是整个系统不可或缺的组成部分,共同...

    jdbc所需jar包.7z

    **commons-dbcp.jar** 是Apache Commons项目中的DBCP(Database Connection Pool)组件,是一个数据库连接池实现。数据库连接池在应用服务器启动时预先创建并管理一定数量的数据库连接,当应用需要时可以迅速获取,...

    dbconnection-pool:数据库连接池简略版

    本文将深入探讨数据库连接池的工作原理、重要性以及如何在Java应用程序中实现和使用它。 数据库连接池的基本思想是创建一组预先配置的数据库连接,这些连接在程序启动时被初始化并存储在一个池中。当应用需要与...

    java连接数据库.pdf

    9. 数据库连接池:为了提高性能,减少连接数据库的开销,常常使用连接池技术管理数据库连接。 此外,Java连接数据库的方式除了JDBC还有JPA、Hibernate等ORM框架,它们提供了更为高级的抽象和封装,减少繁琐的JDBC...

    mysql-connector-java-5.1.37.7z

    MySQL是世界上最受欢迎的开源数据库系统之一,而MySQL Connector/J则是MySQL数据库与Java应用程序之间的桥梁,使得Java...同时,理解JDBC和数据库连接池的工作原理对于Java开发者来说也是提升项目质量和性能的关键。

    java编程中连接Oracle的JDBC的jar包

    3. **建立连接**:在Java代码中,使用`Class.forName()`方法加载驱动,然后通过`DriverManager.getConnection()`创建数据库连接。例如: ```java Class.forName("oracle.jdbc.driver.OracleDriver"); Connection ...

    学习经验分享所涉及到的java jar包myJar.7z

    总结来说,"学习经验分享所涉及到的java jar包myJar.7z"是一个宝贵的教育资源,涵盖了SQL交互、JDBC基础、数据库连接池等多个重要主题。对于希望提升Java数据库编程技能的开发者来说,这是一个值得研究和学习的资料...

    达梦各个版本jdbc驱动:DmJdbcDriver.7z

    - 在Java代码中,通过Class.forName()加载对应的JDBC驱动,并使用DriverManager.getConnection()方法建立数据库连接。 - 编写SQL语句,通过Statement或PreparedStatement对象执行。 - 处理结果集,执行事务操作,...

    jdbc.rar_JDBC增删改查_inq6z_java_jdbc

    3. 数据库连接池:如C3P0、Apache DBCP、HikariCP等,减少连接创建和释放的开销,提高效率。 4. 异常处理:捕获SQLException并进行适当的错误处理。 本教程的"jdbc.rar"可能包含详细的代码示例和解释,涵盖上述...

    mysql数据库连接(java)

    例如,可以使用Apache的DBUtils或Spring的JdbcTemplate来简化数据库操作,或者引入C3P0、HikariCP等连接池来管理数据库连接。 总之,通过Java和MySQL的结合,我们可以实现高效的数据操作。`DBHelper`类提供连接...

    连接postsql数据库的java代码.7z

    首先,我们需要了解Java数据库连接(JDBC)API。JDBC是Java标准API,它提供了与多种数据库交互的能力,包括PostgreSQL。通过JDBC,我们可以执行SQL语句、处理结果集等。 1. **JDBC驱动**:为了连接到PostgreSQL,...

    数据库连接工具c3p0-0.9.5.4

    **c3p0数据库连接池详解** c3p0是一个开源的JDBC连接池,它实现了数据源和JNDI绑定,支持JDBC3规范和JDBC2的标准扩展。c3p0的主要功能是管理数据库连接,使得在多用户并发访问数据库时,能够有效地复用数据库连接,...

    druid-1.0.9.7z

    Druid的主要目标是提供监控、扩展性和性能优化,它在JDBC数据库连接池领域有着广泛的应用。在Java Web开发中,Druid通常作为数据访问层(DAO)的一个关键组件来使用。 Druid的核心特性包括: 1. **连接池**:Druid...

    jdbc-mysql-connection

    标题中的"jdbc-mysql-connection"关键词表明我们讨论的主题是关于Java数据库连接(JDBC)与MySQL数据库之间的交互。JDBC是Java平台上的一个标准接口,它允许Java应用程序与各种类型的数据库进行通信,包括MySQL。...

    gaea 和JDBC z整合

    同时,合理设置数据库连接池参数,如连接超时、空闲连接检查间隔等,可以有效避免资源浪费和连接泄露问题。 总的来说,GAEA和JDBC的整合是一个涉及到环境配置、数据源设置、JDBC代码编写和性能优化的过程。通过这种...

    dhcp-c3p0-jar包.7z

    然而,标题中的"dhcp-c3p0-jar包.7z"实际上与DHCP协议本身关系不大,而是与数据库连接池技术有关。C3P0是一个开源的JDBC连接池,它实现了数据源和JNDI绑定,支持JDBC3规范和JDBC2的标准扩展。 JDBC(Java Database ...

Global site tag (gtag.js) - Google Analytics