- 浏览: 22694 次
- 性别:
- 来自: 北京
最新评论
JAVA数据库连接池
基本概念及原理
数据库连接池是为了解决数据库对象的共享出错问题。
实际就是建立一个缓冲池。
原理
预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需从连接池中取出一个,使用完毕之后再放回去。
JDBC的API中没有提供连接池的方法。
连接池关键问题分析
使用线程同步来解决并发问题
使用一个单例模式的连接池管理类来解决连接多个不同数据库。具体方法:
在连接池管理类的唯一实例被创建时读取一个资源文件,其中资源文件中存放着多个数据库的url地址()、用户名()、密码()等信息。如tx.url=172.21.15.123:5000/tx_it,tx.user=yang,tx.password=yang321。
根据资源文件提供的信息,创建多个连接池类的实例,每一个实例都是一个特定数据库的连接池。连接池管理类实例为每个连接池实例取一个名字,通过不同的名字来管理不同的连接池。
使用资源文件来解决同一个数据库有多个用户使用不同的名称和密码访问的情况。具体方法:
资源文件中设置多个具有相同url地址,但具有不同用户名和密码的数据库连接信息。
可采用每一个事务独占一个连接来实现事务处理, 这种方法可以大大降低事务管理的复杂性。具体方法:
Connection类可以通过设置Connection的AutoCommit属性为false,然后显式的调用commit或rollback方法来实现。
使用空闲池来解决连接池的分配与释放处理。具体办法:
把已经创建但尚未分配出去的连接按创建时间存放到一个空闲池中。
每当用户请求一个连接时,系统首先检查空闲池内有没有空闲连接:
如果有就把建立时间最长(通过容器的顺序存放实现)的那个连接分配给他(实际是先做连接是否有效的判断,如果可用就分配给用户,如不可用就把这个连接从空闲池删掉,重新检测空闲池是否还有连接)。
如果没有则检查当前所建连接池是否达到连接池所允许的最大连接数(maxConn),如果没有达到,就新建一个连接,如果已经达到,就等待一定的时间(timeout)。如果在等待的时间内有连接被释放出来就可以把这个连接分配给等待的用户,如果等待时间超过预定时间timeout,则返回空值(null)。
系统对已经分配出去正在使用的连接只做计数,当使用完后再返还给空闲池。
连接池的配置与维护
连接池中到底应该放置多少连接,才能使系统的性能最佳?
设置连接最小数(系统启动时连接池所创建的连接数)、最大数(使用连接池时所允许连接最大连接数目)
如何确保连接池中的最小连接数呢?
动态策略: 每隔一定时间就对连接池进行检测,如果发现连接数量小于最小连接数,则补充相应数量的新连接,以保证连接池的正常运转。
静态策略: 发现空闲连接不够时再去检查。
连接池的实现
连接池模型
DBConnectionPoolManager(
连接池管理外覆类(wrapper),符合单例模式)
DBConnectionPool(连接池内部类)
从连接池获取或创建可用连接;
public Connection getConnection()
使用完毕之后,把连接返还给连接池;
public synchronized void freeConnection(Connection con)
在系统关闭前,断开所有连接并释放连接占用的系统资源;
public synchronized void release()
还能够处理无效连接(原来登记为可用的连接,由于某种原因不再可用,如超时,通讯问题),并能够限制连接池中的连接总数不低于某个预定值和不超过某个预定值。
private int checkedOut;//已被分配出去的连接数
private int minConn;//连接池里连接的最小数量
private int maxConn;//连接池里允许存在的最大连接数
private String name; //为这个连接池取个名字,方便管理
应用示例:
import java.io.*;
import java.sql.*;
import java.util.*;
import java.util.Date;
//建立DBConnectionManager
public class DBConnectionManager {
static private DBConnectionManager instance;
static private int clients;
private Vector drivers = new Vector();
private PrintWriter log;
private Hashtable pools = new Hashtable();
// 返回唯一的实列
static synchronized public DBConnectionManager getInstance() {
if (instance == null) {
instance = new DBConnectionManager();
}
clients++;
return instance;
}
// 构造函数!
private DBConnectionManager() {
init();
} // 结束构造函数
// 释放一个连接
public void freeConnection(String name, Connection con) {
DBConnectionPool pool = (DBConnectionPool) pools.get(name);
if (pool != null) {
pool.freeConnection(con);
}
}
// 结束释放一个连接
// 取得一个连接
public Connection getConnection(String name) {
DBConnectionPool pool = (DBConnectionPool) pools.get(name);
if (pool != null) {
return pool.getConnection();
}
return null;
}
public Connection getConnection(String name, long time) {
DBConnectionPool pool = (DBConnectionPool) pools.get(name);
if (pool != null) {
return pool.getConnection(time);
}
return null;
} // 结束getconnection
// 关闭所有连接
public synchronized void release() {
{
if (--clients != 0)
return;
}
Enumeration allPools = pools.elements();
while (allPools.hasMoreElements()) {
DBConnectionPool pool = (DBConnectionPool) allPools.nextElement();
pool.release();
}
Enumeration allDrivers = drivers.elements();
while (allDrivers.hasMoreElements()) {
Driver driver = (Driver) allDrivers.nextElement();
try {
DriverManager.deregisterDriver(driver);
log("撤消JDBC驱动程序" + driver.getClass().getName());
} catch (SQLException e) {
log(e, "无法撤消JDBC驱动程序的注册" + driver.getClass().getName());
}
}
}
private void createPools(Properties props) {
Enumeration propNames = props.propertyNames();
while (propNames.hasMoreElements()) {
String name = (String) propNames.nextElement();
if (name.endsWith(".url")) {
String poolName = name.substring(0, name.lastIndexOf("."));
String url = props.getProperty(poolName + ".url");
if (url == null) {
log("没有连接池" + poolName + "指定的URL");
continue;
}
String user = props.getProperty(poolName + ".user");
String password = props.getProperty(poolName + ".password");
String maxconn = props.getProperty(poolName + ".maxconn", "0");
int max;
try {
max = Integer.valueOf(maxconn).intValue();
} catch (NumberFormatException e) {
log("错误的最大连接数:" + maxconn + ".连接池" + poolName);
max = 0;
}
DBConnectionPool pool = new DBConnectionPool(poolName, url,
user, password, max);
pools.put(poolName, pool);
log("成功创建连接池" + poolName);
}
}
}
private void init() {
InputStream is = getClass().getResourceAsStream("/db.properties");
Properties dbProps = new Properties();
try {
dbProps.load(is);
} catch (Exception e) {
System.err.println("不能读取属性文件。请确保db.properties在你的CLASSPATH中");
return;
}
String logFile = dbProps.getProperty("logfile",
"DBConnectionManager.log");
try {
log = new PrintWriter(new FileWriter(logFile, true), true);
} catch (IOException e) {
System.err.println("无法打开日志文件:" + logFile);
log = new PrintWriter(System.err);
}
loadDriver(dbProps);
createPools(dbProps);
}
private void loadDriver(Properties props) {
String driverClasses = props.getProperty("drivers");
StringTokenizer st = new StringTokenizer(driverClasses);
while (st.hasMoreElements()) {
String driverClassName = st.nextToken().trim();
try {
Driver driver = (Driver) Class.forName(driverClassName)
.newInstance();
DriverManager.registerDriver(driver);
drivers.addElement(driver);
log("成功注册驱动程序" + driverClassName);
} catch (Exception e) {
log("无法注册驱动程序:" + driverClassName + ",错误" + e);
}
}
}
private void log(String msg) {
log.println(new Date() + ":" + msg);
}
private void log(Throwable e, String msg) {
log.println(new Date() + ":" + msg);
e.printStackTrace(log);
}
// 建立DBConnectionPool内部类
class DBConnectionPool {
private int checkOut;
private Vector freeConnections = new Vector();
private int maxconn;
private String name;
private String password;
private String URL;
private String user;
public DBConnectionPool(String name, String URL, String user,
String password, int maxconn) {
this.name = name;
this.URL = URL;
this.password = password;
this.user = user;
this.maxconn = maxconn;
}
public synchronized void freeConnection(Connection con) {
freeConnections.addElement(con);
checkOut--;
notifyAll();
}
public synchronized Connection getConnection() {
Connection con = null;
if (freeConnections.size() > 0) {
con = (Connection) freeConnections.firstElement();
freeConnections.removeElementAt(0);
try {
if (con.isClosed()) {
log("从连接池" + name + "删除一个连接");
con = getConnection();
}
} catch (SQLException e) {
log("从连接池" + name + "删除一个连接");
con = getConnection();
}
} else if (maxconn == 0 || checkOut < maxconn) {
con = newConnection();
}
if (con != null) {
checkOut++;
}
return con;
}
public synchronized Connection getConnection(long timeout) {
long startTime = new Date().getTime();
Connection con;
while ((con = getConnection()) == null) {
try {
wait(timeout);
} catch (InterruptedException e) {
}
if ((new Date().getTime() - startTime) >= timeout) {
return null;
}
}
return con;
}
public void release() {
Enumeration allConnections = freeConnections.elements();
while (allConnections.hasMoreElements()) {
Connection con = (Connection) allConnections.nextElement();
try {
con.close();
log("关闭连接池" + name + "中的连接");
} catch (SQLException e) {
log(e, "无法关闭连接池" + name + "中的连接");
}
}
freeConnections.removeAllElements();
}
private Connection newConnection() {
Connection con = null;
try {
con = DriverManager.getConnection(URL, user, password);
log("连接池" + name + "创建一个新的连接");
} catch (SQLException e) {
log(e, "无法创建下列URL的连接" + URL);
return null;
}
return con;
}
}
}
基本概念及原理
数据库连接池是为了解决数据库对象的共享出错问题。
实际就是建立一个缓冲池。
原理
预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需从连接池中取出一个,使用完毕之后再放回去。
JDBC的API中没有提供连接池的方法。
连接池关键问题分析
使用线程同步来解决并发问题
使用一个单例模式的连接池管理类来解决连接多个不同数据库。具体方法:
在连接池管理类的唯一实例被创建时读取一个资源文件,其中资源文件中存放着多个数据库的url地址()、用户名()、密码()等信息。如tx.url=172.21.15.123:5000/tx_it,tx.user=yang,tx.password=yang321。
根据资源文件提供的信息,创建多个连接池类的实例,每一个实例都是一个特定数据库的连接池。连接池管理类实例为每个连接池实例取一个名字,通过不同的名字来管理不同的连接池。
使用资源文件来解决同一个数据库有多个用户使用不同的名称和密码访问的情况。具体方法:
资源文件中设置多个具有相同url地址,但具有不同用户名和密码的数据库连接信息。
可采用每一个事务独占一个连接来实现事务处理, 这种方法可以大大降低事务管理的复杂性。具体方法:
Connection类可以通过设置Connection的AutoCommit属性为false,然后显式的调用commit或rollback方法来实现。
使用空闲池来解决连接池的分配与释放处理。具体办法:
把已经创建但尚未分配出去的连接按创建时间存放到一个空闲池中。
每当用户请求一个连接时,系统首先检查空闲池内有没有空闲连接:
如果有就把建立时间最长(通过容器的顺序存放实现)的那个连接分配给他(实际是先做连接是否有效的判断,如果可用就分配给用户,如不可用就把这个连接从空闲池删掉,重新检测空闲池是否还有连接)。
如果没有则检查当前所建连接池是否达到连接池所允许的最大连接数(maxConn),如果没有达到,就新建一个连接,如果已经达到,就等待一定的时间(timeout)。如果在等待的时间内有连接被释放出来就可以把这个连接分配给等待的用户,如果等待时间超过预定时间timeout,则返回空值(null)。
系统对已经分配出去正在使用的连接只做计数,当使用完后再返还给空闲池。
连接池的配置与维护
连接池中到底应该放置多少连接,才能使系统的性能最佳?
设置连接最小数(系统启动时连接池所创建的连接数)、最大数(使用连接池时所允许连接最大连接数目)
如何确保连接池中的最小连接数呢?
动态策略: 每隔一定时间就对连接池进行检测,如果发现连接数量小于最小连接数,则补充相应数量的新连接,以保证连接池的正常运转。
静态策略: 发现空闲连接不够时再去检查。
连接池的实现
连接池模型
DBConnectionPoolManager(
连接池管理外覆类(wrapper),符合单例模式)
DBConnectionPool(连接池内部类)
从连接池获取或创建可用连接;
public Connection getConnection()
使用完毕之后,把连接返还给连接池;
public synchronized void freeConnection(Connection con)
在系统关闭前,断开所有连接并释放连接占用的系统资源;
public synchronized void release()
还能够处理无效连接(原来登记为可用的连接,由于某种原因不再可用,如超时,通讯问题),并能够限制连接池中的连接总数不低于某个预定值和不超过某个预定值。
private int checkedOut;//已被分配出去的连接数
private int minConn;//连接池里连接的最小数量
private int maxConn;//连接池里允许存在的最大连接数
private String name; //为这个连接池取个名字,方便管理
应用示例:
import java.io.*;
import java.sql.*;
import java.util.*;
import java.util.Date;
//建立DBConnectionManager
public class DBConnectionManager {
static private DBConnectionManager instance;
static private int clients;
private Vector drivers = new Vector();
private PrintWriter log;
private Hashtable pools = new Hashtable();
// 返回唯一的实列
static synchronized public DBConnectionManager getInstance() {
if (instance == null) {
instance = new DBConnectionManager();
}
clients++;
return instance;
}
// 构造函数!
private DBConnectionManager() {
init();
} // 结束构造函数
// 释放一个连接
public void freeConnection(String name, Connection con) {
DBConnectionPool pool = (DBConnectionPool) pools.get(name);
if (pool != null) {
pool.freeConnection(con);
}
}
// 结束释放一个连接
// 取得一个连接
public Connection getConnection(String name) {
DBConnectionPool pool = (DBConnectionPool) pools.get(name);
if (pool != null) {
return pool.getConnection();
}
return null;
}
public Connection getConnection(String name, long time) {
DBConnectionPool pool = (DBConnectionPool) pools.get(name);
if (pool != null) {
return pool.getConnection(time);
}
return null;
} // 结束getconnection
// 关闭所有连接
public synchronized void release() {
{
if (--clients != 0)
return;
}
Enumeration allPools = pools.elements();
while (allPools.hasMoreElements()) {
DBConnectionPool pool = (DBConnectionPool) allPools.nextElement();
pool.release();
}
Enumeration allDrivers = drivers.elements();
while (allDrivers.hasMoreElements()) {
Driver driver = (Driver) allDrivers.nextElement();
try {
DriverManager.deregisterDriver(driver);
log("撤消JDBC驱动程序" + driver.getClass().getName());
} catch (SQLException e) {
log(e, "无法撤消JDBC驱动程序的注册" + driver.getClass().getName());
}
}
}
private void createPools(Properties props) {
Enumeration propNames = props.propertyNames();
while (propNames.hasMoreElements()) {
String name = (String) propNames.nextElement();
if (name.endsWith(".url")) {
String poolName = name.substring(0, name.lastIndexOf("."));
String url = props.getProperty(poolName + ".url");
if (url == null) {
log("没有连接池" + poolName + "指定的URL");
continue;
}
String user = props.getProperty(poolName + ".user");
String password = props.getProperty(poolName + ".password");
String maxconn = props.getProperty(poolName + ".maxconn", "0");
int max;
try {
max = Integer.valueOf(maxconn).intValue();
} catch (NumberFormatException e) {
log("错误的最大连接数:" + maxconn + ".连接池" + poolName);
max = 0;
}
DBConnectionPool pool = new DBConnectionPool(poolName, url,
user, password, max);
pools.put(poolName, pool);
log("成功创建连接池" + poolName);
}
}
}
private void init() {
InputStream is = getClass().getResourceAsStream("/db.properties");
Properties dbProps = new Properties();
try {
dbProps.load(is);
} catch (Exception e) {
System.err.println("不能读取属性文件。请确保db.properties在你的CLASSPATH中");
return;
}
String logFile = dbProps.getProperty("logfile",
"DBConnectionManager.log");
try {
log = new PrintWriter(new FileWriter(logFile, true), true);
} catch (IOException e) {
System.err.println("无法打开日志文件:" + logFile);
log = new PrintWriter(System.err);
}
loadDriver(dbProps);
createPools(dbProps);
}
private void loadDriver(Properties props) {
String driverClasses = props.getProperty("drivers");
StringTokenizer st = new StringTokenizer(driverClasses);
while (st.hasMoreElements()) {
String driverClassName = st.nextToken().trim();
try {
Driver driver = (Driver) Class.forName(driverClassName)
.newInstance();
DriverManager.registerDriver(driver);
drivers.addElement(driver);
log("成功注册驱动程序" + driverClassName);
} catch (Exception e) {
log("无法注册驱动程序:" + driverClassName + ",错误" + e);
}
}
}
private void log(String msg) {
log.println(new Date() + ":" + msg);
}
private void log(Throwable e, String msg) {
log.println(new Date() + ":" + msg);
e.printStackTrace(log);
}
// 建立DBConnectionPool内部类
class DBConnectionPool {
private int checkOut;
private Vector freeConnections = new Vector();
private int maxconn;
private String name;
private String password;
private String URL;
private String user;
public DBConnectionPool(String name, String URL, String user,
String password, int maxconn) {
this.name = name;
this.URL = URL;
this.password = password;
this.user = user;
this.maxconn = maxconn;
}
public synchronized void freeConnection(Connection con) {
freeConnections.addElement(con);
checkOut--;
notifyAll();
}
public synchronized Connection getConnection() {
Connection con = null;
if (freeConnections.size() > 0) {
con = (Connection) freeConnections.firstElement();
freeConnections.removeElementAt(0);
try {
if (con.isClosed()) {
log("从连接池" + name + "删除一个连接");
con = getConnection();
}
} catch (SQLException e) {
log("从连接池" + name + "删除一个连接");
con = getConnection();
}
} else if (maxconn == 0 || checkOut < maxconn) {
con = newConnection();
}
if (con != null) {
checkOut++;
}
return con;
}
public synchronized Connection getConnection(long timeout) {
long startTime = new Date().getTime();
Connection con;
while ((con = getConnection()) == null) {
try {
wait(timeout);
} catch (InterruptedException e) {
}
if ((new Date().getTime() - startTime) >= timeout) {
return null;
}
}
return con;
}
public void release() {
Enumeration allConnections = freeConnections.elements();
while (allConnections.hasMoreElements()) {
Connection con = (Connection) allConnections.nextElement();
try {
con.close();
log("关闭连接池" + name + "中的连接");
} catch (SQLException e) {
log(e, "无法关闭连接池" + name + "中的连接");
}
}
freeConnections.removeAllElements();
}
private Connection newConnection() {
Connection con = null;
try {
con = DriverManager.getConnection(URL, user, password);
log("连接池" + name + "创建一个新的连接");
} catch (SQLException e) {
log(e, "无法创建下列URL的连接" + URL);
return null;
}
return con;
}
}
}
发表评论
-
遮盖层覆盖整个页面
2015-07-08 10:45 593html代码: <body topmargin= ... -
spring注解+restlet
2014-08-26 13:32 652spring注解精解: http://www.douban.c ... -
Spring使用程序方式读取properties文件
2014-07-03 10:37 536Spring使用程序方式读取properties文件 在sp ... -
用javascript取当前系统时间(年、月、日等全)
2013-07-25 14:56 566var myDate = new Date(); myDate ... -
sql--查询数据库的连接数
2013-06-07 14:04 610Oracle: select * from v$sessio ... -
jQuery中设置form表单中action值的方法
2013-04-28 18:16 1156html代码: <form id="myFo ... -
java filter
2013-04-24 23:17 941一、使浏览器不缓存页面的过滤器 Java代码 impo ... -
sql count
2013-04-23 14:33 722连接该服务器的个数: SELECT count(*) FRO ... -
关闭打开页js(兼容浏览器)
2013-04-22 13:17 847<script> function closeSe ... -
sql-修改表
2013-04-11 10:19 714如需在表中添加列,请使用下列语法: ALTER TABLE t ... -
wget 爬虫
2012-11-13 13:34 1459wget 使用指南 wget是一个从网络上自动下载文件的自由工 ... -
Struts2的整理
2012-11-13 13:31 8861、任何表现层框架都是用来帮我们实现MVC model1(js ... -
dwr的使用
2012-11-11 12:38 813Dwr使用说明 1. 将dwr的ja ... -
Ajax的使用
2012-11-11 12:37 703ajax的使用步骤: 1.需要通过JavaScript创建XM ... -
事务传播特性和事务隔离级别
2012-11-08 23:48 609事务传播特性了解事务 ... -
ibatis
2012-11-08 23:45 758ibatis: ibatis中dao中的方法在使用sqlMap ... -
懒加载
2012-11-07 19:03 638get和load默认的时候都是立即检索,只有设置lazyloa ... -
HQL语句
2012-11-07 19:01 6201.实体查询 String hql = &qu ... -
类的加载和反射
2012-11-07 18:57 6711. 类的加载、连接和初始 a) 类的加载 i. 当程序主动使 ... -
部分重要SQL语句
2012-11-06 20:13 740TO_CHAR(date, 'fmt') 用于将 ...
相关推荐
标题:Java数据库连接池 描述:本篇将详细介绍Java数据库连接池的概念,代码实现以及其在实际项目中的应用。数据库连接池是Java开发中优化数据库访问效率的关键技术,通过复用预创建的数据库连接,避免频繁创建和...
本篇文章将深入解析一个自定义的JAVA数据库连接池类,帮助开发者更好地理解和运用这一关键技术。 首先,连接池的基本思想是预先创建一定数量的数据库连接,并存储在一个集合(如Vector)中,供应用程序按需获取和...
Java数据库连接池的原理与应用 在Java开发领域,数据库连接池(Database Connection Pool,简称DBCP)是一种提高数据库访问性能、降低资源消耗的重要技术。它通过预先建立一定数量的数据库连接,存储在一个“池”中...
总的来说,Java数据库连接池如C3P0和Druid,以及Spring的JdbcTemplate,都是为了优化数据库操作而设计的工具。它们各自有其特点和优势,开发者可以根据项目需求选择合适的技术。在使用过程中,充分理解和合理配置...
Java数据库连接池是Java应用程序管理数据库连接的一种高效方式。它避免了每次需要访问数据库时创建新的连接,而是预先创建一定数量的连接并保存在池中,当程序需要时可以从池中获取,用完后归还,从而提高了系统性能...
Java数据库连接池C3P0是一种常用的开源数据库连接管理工具,它通过提供连接池服务,提高了应用程序处理数据库连接的效率,降低了系统资源的消耗。在Java应用中,尤其是在服务器端,数据库连接的创建和关闭是相对耗时...
本项目提供了一个轻量级的Java数据库连接池实现,旨在简化开发过程,提高应用性能并降低资源消耗。下面将详细介绍这个轻量级Java数据库连接池的设计理念、工作原理以及如何使用。 1. **设计理念** 轻量级数据库...
Java数据库连接池是一种重要的技术,它在Java应用程序与数据库交互时起到了关键的作用。数据库连接池在多线程、高并发的环境下尤其重要,因为它能够有效地管理和重用数据库连接,从而提高系统性能,减少资源消耗。 ...
Java数据库连接池驱动是Java应用程序在访问数据库时用于优化资源管理的一种技术。它提供了一种在多个数据库操作之间重用数据库连接的方式,从而避免了频繁创建和关闭连接带来的性能开销。连接池的核心思想是池化资源...