`
123003473
  • 浏览: 1059808 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

HttpClient并发

    博客分类:
  • java
 
阅读更多
HttpClient Theading
这篇文章概括了怎样在多线程环境下安全的使用HttpClient。



MultiThreadedHttpConnectionManager



在HttpClient中使用多线程的一个主要原因是可以一次执行多个方法。在执行期间,每一个方法都使用一个HttpConnection实例。由于在同一时间多个连接只能安全地用于单一线程和方法和有限的资源,我们就必须确保连接分配给正确的方法。而MultiThreadedHttpConnectionManager完全可以代替我们完成这一项工作,这样我们就不必去考虑多线程带来安全的问题。

MultiThreadedHttpConnectionManager connectionManager =

                 new MultiThreadedHttpConnectionManager();

          HttpClient client = new HttpClient(connectionManager);

以上代码中的HttpClient就在多线程中执行多个方法了。当我们再次调用httpClient.executeMethod()方法时,就会去Connection Manager中去请求HttpConneciton的实例,这样就避免了线程安全问题,因为HttpClient已经帮我们做了。



Options



MultThreadedHttpConnectionManager参数配置:



connectionStaleCheckingEnabled:这个标志对所有已经创建的connections都适用。除特殊情况外,此值应该设置成true。

maxConnectionsPerHost:最大连接数,默认是2。

maxTotalConnections:最大活动连接数,默认是20。



释放连接



connection management比较重要的是当连接不再使用时,一定要手动释放。这样做的原因是HttpClient不能够确定哪个方法不被使用,哪个方法还在使用。这是因为Response body不是由HttpClient来自动读取其数据的,而是由使用HttpClient的应用程序来完成的。当读取Response的数据是时,必须使用此方法的连接。这样,在Response的数据在读取前,HttpClient是没有释放连接的。所有这就要求在读取完Response的数据后,应用程序及时的使用releaseConnection()方法来释放连接。



MultiThreadedHttpConnectionManager connectionManager =

                 new MultiThreadedHttpConnectionManager();

          HttpClient client = new HttpClient(connectionManager);

                     ...

        // and then from inside some thread executing a method

        GetMethod get = new GetMethod("http://httpcomponents.apache.org/");

        try {

            client.executeMethod(get);

            // print response to stdout

            System.out.println(get.getResponseBodyAsStream());

        } finally {

            // be sure the connection is released back to the connection

            // manager

            get.releaseConnection();

        }



特别注意,无论执行的方法或是否也不例外被抛出。对于每一个HttpClient.executeMethod方法必须有一个method.releaseConnection ( )来释放连接。

分享到:
评论

相关推荐

    使用java的HttpClient实现多线程并发

    通过使用HttpClient的连接池和多线程,我们可以有效地并发执行HTTP GET请求,同时控制并发数量,避免过多的网络连接导致服务器压力过大。这种方式提高了请求效率,减少了资源消耗,并且遵循了最佳实践。

    HttpClientHelper 工具类

    这样做的好处是避免了频繁创建和销毁HttpClient对象,降低了系统资源消耗,尤其在高并发场景下,可以防止大量并发请求对服务器造成压力。 HttpClientHelper 的主要功能可能包括以下部分: 1. **同步请求**:使用...

    httpclient4.2.1.zip

    1. **多线程支持**:HttpClient 4.2.1支持多线程并发请求,可以高效地处理大量并发连接,提升了处理能力。 2. **连接管理**:它提供了连接池管理,允许重用已建立的TCP连接,减少网络延迟,提高整体性能。 3. **...

    httpClient需要的jar包

    7. **异步编程**:HttpClient 4.5及以上版本引入了AsyncHttpClient,支持异步非阻塞I/O,适用于高并发场景。 8. **Cookie管理**:HttpClient有一个内置的Cookie管理器,可以处理服务器返回的Cookie,并在后续请求中...

    httpclient

    HttpClient也支持异步操作,通过`HttpAsyncClient`类,可以在回调函数中处理响应,适合于高并发场景。 总的来说,HttpClient是Java中强大的HTTP客户端工具,能够满足各种复杂的HTTP请求需求。其丰富的功能和高度可...

    httpclient-4.5.3中文版文档,很实用

    8. **异步操作**:除了同步API,HttpClient还提供了异步API,基于`Future`接口,可以非阻塞地发送请求并接收响应,适用于高并发场景。 9. **Cookie管理**:HttpClient处理HTTP会话状态,支持标准的Cookie规范,如...

    使用HttpClient必须的jar包

    7. **异步处理**:HttpClient 4.5以上版本提供了异步客户端API,可以并发处理多个请求,提高应用的并发性能。 8. **SSL/TLS支持**:HttpClient可以配置为使用HTTPS协议,需要`httpmime-x.x.x.jar`(处理MIME类型,...

    httpclient方式调用url

    HttpClient适用于单次请求,但如果需要进行大量的并发请求,可能需要考虑使用更高级的异步模型,如Apache HttpClient的AsyncClient。 总之,HttpClient是Java开发中处理HTTP请求的强大工具,它提供了一套完整的API...

    httpclient4.3工具类

    10. **线程安全**:为了适应多线程环境,`httpclientUtils`可能已经考虑了HttpClient实例的线程安全问题,确保在并发环境中正确使用。 在实际使用`httpclientUtils`时,开发者可以通过调用工具类提供的方法,如`...

    httpclient4.4.1 and httpclient4.5.3.rar

    - **连接管理**:HttpClient 4.4.1引入了更智能的连接管理和重用策略,提高了并发性能。它支持多路复用,允许在一个TCP连接上处理多个HTTP请求,降低了延迟并减少了服务器负载。 - **性能优化**:4.4.1版本对内部...

    HTTPClient 的一个封装

    - **连接池管理**:通过`PoolingHttpClientConnectionManager`管理连接,提高性能和并发能力。 - **异步处理**:使用`HttpAsyncClient`进行非阻塞I/O,提高响应速度。 - **Cookie管理**:处理服务器返回的Cookie,...

    httpClient组合包.zip

    此外,HttpClient还支持异步操作,可以在多线程环境中高效地处理并发请求。 2. **httpcore-4.4.12.jar**:这是HttpClient的核心库,包含了HTTP协议的基本组件,如连接管理、请求和响应模型、编码器和解码器等。...

    httpclient-4.5.3官方API中文文档_最新译版_2886K

    5. 异步请求:HttpClient提供异步执行请求的功能,可以实现非阻塞I/O,提高并发性能。 五、HttpClient的应用场景 HttpClient广泛应用于Web服务调用、爬虫程序、数据同步、自动化测试等领域。例如,在Web服务API调用...

    httpclient所需lib

    同时,HttpClient还支持异步操作,可以利用多线程并发处理多个请求,提高整体性能。 总的来说,HttpClient是Java开发中不可或缺的工具,结合其依赖库,可以方便地进行各种复杂的HTTP操作。理解并熟练掌握HttpClient...

    httpclient-4.5.3.zip

    - **连接管理**:通过`HttpConnectionManager`,HttpClient可以管理多个并发连接,实现高效的连接复用,降低网络延迟。 - **请求和响应处理**:HttpClient提供了`HttpRequestExecutor`和`HttpResponseHandler`接口...

    httpclient4.5 jar包

    - 完善的异步处理:支持非阻塞I/O,适应高并发场景,提高系统性能。 - 强大的Cookie管理:提供了完善的Cookie策略,便于处理网站登录状态等。 - 自动处理重定向和重试:简化了处理网络异常的代码逻辑。 - 支持...

    spring测试HTTPclient来的类

    测试httpclient,主要测试json参数的接口,包括get请求和post请求。

    Apache httpclient源码4.5.12

    `Future<HttpResponse>`返回的结果可以异步处理,增强了程序的并发性能。 在学习HttpClient源码时,你可以深入理解HTTP协议的工作方式,了解如何使用Java进行网络编程,以及如何设计可扩展和高效的库。源码中的注释...

    httpclient-4.5.3 api 中文版

    这有助于处理并发请求,并确保资源的有效利用。 4. **重试处理(Retry Handler)**:HttpClient 提供了`HttpRequestRetryHandler`接口,让你可以自定义当请求失败时是否应重试的策略。这在处理网络不稳定或暂时性...

Global site tag (gtag.js) - Google Analytics