前两天,项目部某项目使用websphere连接池出问题,在系统运行一定时候后,无法从连接池中获取Connection了。
这已经是这一年多来,我 接手的不是第八、就是是第九个类似问题了。这似乎不是一个很复杂的问题,但是确实在项目应用部署中却频繁出现的问题。
这些问题都有很多比较明显的共同点,也大多集中在如下情况中:
(1)连接池和数据库服务器,表现为大量sleeping connection未释放
(2)应用程序获取的连接为stale connection(无效连接)
(3)数据库服务器重起后,应用服务器也需要重起
在应用部署过程中,为了在获取尽可能高效的数据库连接处理,采用应用服务器的连接池,这是个正确的选择。几乎所有的项目组都会这么做,而且配置和应用也都没有什么难度。—— 但是很不幸运,正是很多人所寄予厚望的应用服务器连接池,却很容易忽悠大家,在系统运行运行一段时间后,会毫无情面的抛出获取连接超时、失败,或者报告这是一个无效的连接······等等匪夷所思的问题。
正是 连接池的“池缓存”的功能,让数据库连接能够高效的利用;但也正是“池缓存”的功能,让这些问题不断的暴露出来,正所谓“成也萧何,败也萧何”。
因为在池中缓冲的那些“Connection”,有很多是刚刚被Client端释放,但是连接池本身来却没有去close它们,而是依然“维持”连接,以期等待后续其他Client的请求。—— 但是就是这么一段可能并不长的时间,却有着很多潜在的危险:此时网络有一定的不稳定,池中原本与数据库保持连接的Connection,却因此而中断了通讯——但是此时连接池依然以为这个一个有效的Connection返回给了Client······结果大家可想而知。
真实的原因可能比这更加复杂,也更多种情况,也因此就造成了上面那些种异常的发生。
其实,解决这些异常,本身不是很难,而且几乎当前所有的应用服务器连接池都提供了支持,甚至包括很多开源的连接池组件,比如Apache DBCP。
解决诸如此类连接池异常问题,把握如下两个关键点即可:
(1)打开应用服务器连接池的“续连接支持开关”,就是说,在把池中的Connection对象返给Client端的时候(或从Client端回收的时候)做一次有效性验证,以确定这是一个有效连接。
(2)打开连接池的无效连接定期回收机制,就是说,让连接池每经过一段时间,就对连接池中的那些已经无效的连接进行回收。(但切记,这样的回收操作尽量不要过于频繁)
下面就拿Weblogic和WebShpere两款应用服务来说明,如何设置它们连接池的“续连接”和“回收”机制
(一)WebLogic Application Server
(1)weblogic的连接验证设置:
WLS里设置连接的检查,一个是获取连接的时候检查该连接是否有效,另外一个就是释放连接的时候检查。这两个检查在配置连接池的时候都是可以设置的。
TestConnectionsOnReserve 从连接池获取连接后是否进行有效性测试 True/false
RefreshMinutes parameter 设定connection pool的刷新时间 刷新的时间间隔
Test Table Name 测试的表名,也可以指定SQL 表名或者是SQL
(2)weblogic的无效连接回收时间设置:
通过设置weblogic-ra.xml中的inactive-connection-timeout-seconds,weblogic连接池会根据设置,主动关闭那些超时idle的connection。关于weblogic-ra.xm的文档如下:
http://e-docs.bea.com/wls/docs81/jconnector/dtdappen.html#1031211
(二)Webshpere Application Server
(1)首先需要通过修改配置文件来启动预连接测试功能。主要是修改$WAS_HOME/properties/j2c.properties 配置文件,修改后重新启动服务器。
修改advanced-connection-properties 元素,jdbc/DataSource应替换为用户的数据源的JNDI名称。
testConnection必须设为true,以表明用户启动预连接测试功能。
testConnectionRetryInterval为预连接测试失败后重试间隔的秒数。
(2)其次需要配置预连接测试语句:
WebSphere的管理控制台,定位Resources > JDBC_provider > Data Sources > data_source > Custom Properties 。
新建一个用户属性,指定 preTestSQLString (大小写敏感) 作为属性名,指定要测试的SQL语句作为属性值。
注:这条SQL语句是用来检查连接是否有效的,必须用有效的SQL语句,并且需要执行速度最快,占用资源最少。每次用户发出数据库连接请求时WebSphere会先调用这条语句做连接尝试。DB2数据库用户可以选择SELECT 1 FROM SYSIBM.SYSDUMMY1 。Oracle用户可以选择SELECT USER FROM DUAL作为测试连接语句。
但是,在应用过程中,不代表所有的应用连接池部署都需要开启“续连接”或“回收”,这是因为,续连接回造成每次获取连接的时间会无形的增加,而“回收”操作则会比较占用资源,如果过于频繁,则影响了系统响应效率。
所以,这两项连接池的服务,是否一定需要开启,则要根据应用特点来分别对待了。
分享到:
相关推荐
4. 监控与调整:连接池会监控连接状态,定期检查和回收失效的连接,同时根据需求动态调整池中连接的数量。 连接池的优缺点: 优点: 1. 提高性能:通过重用已存在的连接,减少了创建和销毁连接的时间。 2. 资源优化...
Java FTP连接池是一种用于管理FTP(文件传输协议)连接的资源池,它的主要目标是提高应用程序的性能和效率。在传统的FTP操作中,每次需要连接到FTP服务器时都会创建一个新的连接,这会消耗大量时间和系统资源。而...
这个库可能包含了连接池的具体实现,如连接的初始化、配置参数、连接超时设置、最大连接数限制、空闲连接回收策略等功能。在实际应用中,开发者可以根据业务需求调整这些参数,以达到最佳性能和资源利用率。 Kafka...
3. 连接回收:应用完成数据库操作后,将连接归还给连接池,而不是关闭连接。 4. 连接管理:连接池负责监控连接的状态,如果发现有空闲超时或损坏的连接,会进行清理并重新创建新的连接。 5. 连接池扩展与收缩:...
Tomcat 连接池配置是 Web 应用程序中一个非常重要的组件,它负责管理和维护数据库连接,确保数据访问的高速和安全性。本文将详细介绍 Tomcat 连接池配置的步骤和原理,帮助读者快速掌握 Tomcat 连接池的使用。 一、...
如果一个连接长时间未使用或者服务器已经关闭了连接,OkHttp会将其从连接池中移除,防止资源浪费。 3. **连接池的大小限制**:为了防止过多的连接占用系统资源,OkHttp为每个主机名设定了连接数量的最大值。超出这...
连接池的基本思想是预先创建一定数量的连接并保持空闲状态,当应用需要时可以从池中获取,使用完毕后再归还到池中,而不是直接关闭。这样可以避免每次创建和关闭连接的开销,特别是在高并发场景下,连接池能显著提升...
Java连接SAP系统所用的JCo连接池的配置和使用是指在Java应用程序中使用JCo连接池来连接SAP R3系统的技术。JCo(Java Connector)是SAP提供的一种Java API,用于连接SAP系统。在Java应用程序中使用JCo连接池可以提高...
数据库连接池是在应用服务器启动时就建立一定数量的数据库连接,这些连接被存储在一个“池”中。当应用程序需要与数据库交互时,它会从连接池中获取一个已经存在的连接,而不是每次操作都创建新的连接。完成操作后...
5. **超时与回收**:连接池会设定每个连接的最大生命周期,超过这个时间未被使用的连接会被自动回收,防止因长时间未使用的“僵尸”连接占用资源。 ### C#中的数据库连接池实现 在C#中,主要使用ADO.NET框架来实现...
Java Socket 连接池实现是提高网络应用性能和效率的关键技术之一。在高并发的网络环境中,频繁地创建和销毁Socket连接会导致大量的系统资源浪费,影响整体性能。为了解决这个问题,开发人员通常会使用连接池来管理和...
对于部署在Tomcat服务器上的Java Web应用而言,配置一个合适的连接池显得尤为重要。本文将详细介绍如何在Tomcat环境中配置Oracle数据库连接池,并给出相应的配置示例。 #### 二、配置步骤 ##### 1. 在 `server.xml...
- **连接回收**:使用完毕后,应用程序不应直接关闭连接,而是将其返回到连接池,供其他请求复用。 - **超时管理**:连接池需要监控每个连接的空闲时间,避免因长时间未使用的“僵尸”连接占用资源。 - **线程...
4. 连接回收:连接池需要定期检查并清理无效的连接,例如超时未使用的连接。这可以通过定时任务或在每次分配连接时进行检查。 5. 线程安全:在多线程环境中,连接池的创建、分配和回收操作必须是线程安全的,防止...
Java Socket连接池是一种优化网络通信性能的技术,它允许应用程序复用已经建立的Socket连接,从而减少因频繁创建和销毁Socket连接而产生的开销。在高并发的服务器环境中,Socket连接池能够有效地提升系统效率和响应...
3. 连接的监控和维护:定期检查连接有效性,及时回收失效连接,并根据池中连接使用情况动态调整连接数量。 4. 连接池的关闭:在应用程序结束时,需要关闭所有连接并释放资源。 然而,自定义连接池往往需要处理很多...
在IT行业中,连接池是数据库管理的一个重要概念,特别是在服务器端的应用开发中,它对于提高系统性能、优化资源利用率有着至关重要的作用。连接池,顾名思义,就是存储数据库连接的一个“池”,它允许应用程序重复...