`
zzc1684
  • 浏览: 1220851 次
  • 性别: Icon_minigender_1
  • 来自: 广州
文章分类
社区版块
存档分类
最新评论

HttpClient学习系列 -- 学习总结

阅读更多

jar包

 HttpClient 4.x版本

 

简要介绍

HttpComponents 包括 HttpCore包和HttpClient包

HttpClient:Http的执行http请求

DefaultHttpClient:httpClient默认实现

HttpGet、HttpPost:Get、Post方法执行类

HttpResponse:执行返回的Response,含http的header和执行结果实体Entity

HttpEntity:Http返回结果实体,不含Header内容

HttpParam:连接参数,配合连接池使用

PoolingClientConnectionManager:连接池

 

基础Get方法

Java代码  收藏代码
  1. // 默认的client类。  
  2. HttpClient client = new DefaultHttpClient();  
  3. // 设置为get取连接的方式.  
  4. HttpGet get = new HttpGet(url);  
  5. // 得到返回的response.  
  6. HttpResponse response = client.execute(get);  
  7. // 得到返回的client里面的实体对象信息.  
  8. HttpEntity entity = response.getEntity();  
  9. if (entity != null) {  
  10.     System.out.println( entity.getContentEncoding());  
  11.     System.out.println( entity.getContentType());  
  12.     // 得到返回的主体内容.  
  13.     InputStream instream = entity.getContent();  
  14.     BufferedReader reader = new BufferedReader(new InputStreamReader(instream, encoding));  
  15.     System.out.println(reader.readLine());  
  16.     // EntityUtils 处理HttpEntity的工具类  
  17.     // System.out.println(EntityUtils.toString(entity));  
  18. }  
  19.   
  20. // 关闭连接.  
  21. client.getConnectionManager().shutdown();  

 

 

基础Post方法

 

Java代码  收藏代码
  1.     DefaultHttpClient httpclient = new DefaultHttpClient();  
  2.     HttpPost httpost = new HttpPost(url);  
  3.     // 添加参数  
  4.     List<NameValuePair> formparams = new ArrayList<NameValuePair>();  
  5.     formparams.add(new BasicNameValuePair("p""1"));  
  6.     formparams.add(new BasicNameValuePair("t""2"));  
  7.     formparams.add(new BasicNameValuePair("e""3"));  
  8.   
  9.     UrlEncodedFormEntity urlEntity =  new UrlEncodedFormEntity(formparams, "UTF-8");  
  10.     httpost.setEntity(urlEntity);  
  11.   
  12.     HttpResponse response = httpclient.execute(httpost);  
  13.     HttpEntity entity = response.getEntity();  
  14.   
  15.     System.out.println("Login form get: " + response.getStatusLine() + entity.getContent());  
  16. //  dump(entity, encoding);  
  17.     System.out.println("Post logon cookies:");  
  18.     List<Cookie> cookies = httpclient.getCookieStore().getCookies();  
  19.     for (int i = 0; i < cookies.size(); i++) {  
  20.         System.out.println("- " + cookies.get(i).toString());  
  21.     }  
  22.     // 关闭请求  
  23.     httpclient.getConnectionManager().shutdown();  

 

 

保留Session,保留用户+密码状态

Demo1,只支持单线程

 

Java代码  收藏代码
  1. DefaultHttpClient httpclient = new DefaultHttpClient(  
  2.     new ThreadSafeClientConnManager());  
  3.   
  4. HttpPost httpost = new HttpPost(url);  
  5. // 添加参数  
  6. List<NameValuePair> formparams = new ArrayList<NameValuePair>();  
  7. formparams.add(new BasicNameValuePair("p""1"));  
  8. formparams.add(new BasicNameValuePair("t""2"));  
  9. formparams.add(new BasicNameValuePair("e""3"));  
  10. // 设置请求的编码格式  
  11. httpost.setEntity(new UrlEncodedFormEntity(formparams, Consts.UTF_8));  
  12. // 登录一遍  
  13. httpclient.execute(httpost);  
  14. // 然后再第二次请求普通的url即可。  
  15. httpost = new HttpPost(url2);  
  16. BasicResponseHandler responseHandler = new BasicResponseHandler();  
  17. System.out.println(httpclient.execute(httpost, responseHandler));  
  18. httpclient.getConnectionManager().shutdown();  
  19.   
  20. return "";  

 

 

 

Demo2:第二次请求带上第一次请求的Cookie 

    用于在用户+密码等候后,后续根据第一次请求的URL获取的Cookie,把这些Cookie添加到第二次请求的Cookie中

 

 

Java代码  收藏代码
  1. DefaultHttpClient httpclient = new DefaultHttpClient();  
  2.         HttpPost httpost = new HttpPost(url);  
  3.         // 添加参数  
  4.         List<NameValuePair> formparams = new ArrayList<NameValuePair>();  
  5.         formparams.add(new BasicNameValuePair("uname", name));  
  6.         formparams.add(new BasicNameValuePair("pass""e0c10f451217b93f76c2654b2b729b85"));  
  7.         formparams.add(new BasicNameValuePair("auto_login","0"));  
  8.         formparams.add(new BasicNameValuePair("a","1"));  
  9.         formparams.add(new BasicNameValuePair("backurl","1"));  
  10.    
  11.         UrlEncodedFormEntity urlEntity =  new UrlEncodedFormEntity(formparams, "UTF-8");  
  12.         httpost.setEntity(urlEntity);  
  13.         HttpContext localContext = new BasicHttpContext();  
  14.   
  15.         HttpResponse response = httpclient.execute(httpost,localContext);  
  16.         HttpEntity entity = response.getEntity();  
  17.         // 打印获取值  
  18.         System.out.println(Arrays.toString(response.getAllHeaders()));  
  19.         System.out.println(EntityUtils.toString(entity));  
  20.    
  21.         // 第二次请求,使用上一次请求的Cookie  
  22.         DefaultHttpClient httpclient2 = new DefaultHttpClient();  
  23.         HttpPost httpost2 = new HttpPost("http://my.ifeng.com/?_c=index&_a=my");  
  24.         // 获取上一次请求的Cookie  
  25.         CookieStore cookieStore2 = httpclient2.getCookieStore();  
  26.         // 下一次的Cookie的值,将使用上一次请求  
  27.         CookieStore cookieStore = httpclient.getCookieStore();  
  28.         List<Cookie> list = cookieStore.getCookies();  
  29.         for(Cookie o : list){  
  30.             System.out.println(o.getName() + " = " + o.getValue() + " 12");;  
  31.             cookieStore2.addCookie(o);  
  32.         }  
  33.    
  34.         HttpResponse response2 = httpclient2.execute(httpost2);  
  35.         HttpEntity entity2 = response2.getEntity();  
  36.         System.out.println(Arrays.toString(response2.getAllHeaders()));  
  37.         System.out.println(EntityUtils.toString(entity2));  

 

 

 

获取访问上下文

 

 

Java代码  收藏代码
  1. HttpClient httpclient = new DefaultHttpClient();  
  2. // 设置为get取连接的方式.  
  3. HttpGet get = new HttpGet(url);  
  4. HttpContext localContext = new BasicHttpContext();  
  5. // 得到返回的response.第二个参数,是上下文,很好的一个参数!  
  6. httpclient.execute(get, localContext);  
  7.   
  8. // 从上下文中得到HttpConnection对象  
  9. HttpConnection con = (HttpConnection) localContext  
  10.         .getAttribute(ExecutionContext.HTTP_CONNECTION);  
  11. System.out.println("socket超时时间:" + con.getSocketTimeout());  
  12.   
  13. // 从上下文中得到HttpHost对象  
  14. HttpHost target = (HttpHost) localContext  
  15.         .getAttribute(ExecutionContext.HTTP_TARGET_HOST);  
  16. System.out.println("最终请求的目标:" + target.getHostName() + ":"  
  17.         + target.getPort());  
  18.   
  19. // 从上下文中得到代理相关信息.  
  20. HttpHost proxy = (HttpHost) localContext  
  21.         .getAttribute(ExecutionContext.HTTP_PROXY_HOST);  
  22. if (proxy != null)  
  23.     System.out.println("代理主机的目标:" + proxy.getHostName() + ":"  
  24.             + proxy.getPort());  
  25.   
  26. System.out.println("是否发送完毕:"  
  27.         + localContext.getAttribute(ExecutionContext.HTTP_REQ_SENT));  
  28.   
  29. // 从上下文中得到HttpRequest对象  
  30. HttpRequest request = (HttpRequest) localContext  
  31.         .getAttribute(ExecutionContext.HTTP_REQUEST);  
  32. System.out.println("请求的版本:" + request.getProtocolVersion());  
  33. Header[] headers = request.getAllHeaders();  
  34. System.out.println("请求的头信息: ");  
  35. for (Header h : headers) {  
  36.     System.out.println(h.getName() + "--" + h.getValue());  
  37. }  
  38. System.out.println("请求的链接:" + request.getRequestLine().getUri());  
  39.   
  40. // 从上下文中得到HttpResponse对象  
  41. HttpResponse response = (HttpResponse) localContext  
  42.         .getAttribute(ExecutionContext.HTTP_RESPONSE);  
  43. HttpEntity entity = response.getEntity();  
  44. if (entity != null) {  
  45.     System.out.println("返回结果内容编码是:" + entity.getContentEncoding());  
  46.     System.out.println("返回结果内容类型是:" + entity.getContentType());  
  47. }  

 

 

 

 

连接池和代理:

   每次使用最后一句new DefaultHttpClient(cm, httpParams);获取新的HttpClient

   里面还有一条如何设置代理

 

Java代码  收藏代码
  1.         // HttpParams   
  2.         HttpParams httpParams  = new BasicHttpParams();    
  3.         // HttpConnectionParams 设置连接参数  
  4.          // 设置连接超时时间    
  5.         HttpConnectionParams.setConnectionTimeout(httpParams, 30000);    
  6.         // 设置读取超时时间    
  7.         HttpConnectionParams.setSoTimeout(httpParams, 60000);   
  8.   
  9.         SchemeRegistry schemeRegistry = new SchemeRegistry();  
  10.         schemeRegistry.register(  
  11.                  new Scheme("http"80, PlainSocketFactory.getSocketFactory()));  
  12. //      schemeRegistry.register(  
  13. //               new Scheme("https", 443, SSLSocketFactory.getSocketFactory()));  
  14.         PoolingClientConnectionManager cm = new PoolingClientConnectionManager(schemeRegistry);  
  15.         // 设置最大连接数    
  16.         cm.setMaxTotal(200);  
  17.         // 设置每个路由默认最大连接数    
  18.         cm.setDefaultMaxPerRoute(20);  
  19. //      // 设置代理和代理最大路由  
  20. //      HttpHost localhost = new HttpHost("locahost", 80);  
  21. //      cm.setMaxPerRoute(new HttpRoute(localhost), 50);  
  22.         // 设置代理,  
  23.         HttpHost proxy = new HttpHost("10.36.24.3"60001);  
  24.         httpParams.setParameter(ConnRoutePNames.DEFAULT_PROXY,  proxy);  
  25.           
  26.         HttpClient httpClient = new DefaultHttpClient(cm, httpParams);  

 

自动重连

   如果某次请求请求失败,可以自动重连

 

Java代码  收藏代码
  1. DefaultHttpClient httpClient = new DefaultHttpClient();  
  2.             // 可以自动重连  
  3.             HttpRequestRetryHandler requestRetryHandler2 = new HttpRequestRetryHandler() {    
  4.                 // 自定义的恢复策略    
  5.                 public synchronized boolean retryRequest(IOException exception, int executionCount, HttpContext context) {    
  6.                     // 设置恢复策略,在发生异常时候将自动重试3次    
  7.                     if (executionCount > 3) {      
  8.                         // 超过最大次数则不需要重试      
  9.                         return false;      
  10.                     }      
  11.                     if (exception instanceof NoHttpResponseException) {      
  12.                         // 服务停掉则重新尝试连接      
  13.                         return true;      
  14.                     }      
  15.                     if (exception instanceof SSLHandshakeException) {      
  16.                         // SSL异常不需要重试      
  17.                         return false;      
  18.                     }     
  19.                     HttpRequest request = (HttpRequest) context.getAttribute(ExecutionContext.HTTP_REQUEST);    
  20.                     boolean idempotent = (request instanceof HttpEntityEnclosingRequest);    
  21.                     if (!idempotent) {    
  22.                         // 请求内容相同则重试    
  23.                         return true;    
  24.                     }    
  25.                     return false;    
  26.                 }    
  27.             };   
  28.             httpClient.setHttpRequestRetryHandler(requestRetryHandler2);   

 

 

 

 

 

使用自定义ResponseHandler处理返回的请求

 

 

Java代码  收藏代码
  1. HttpClient httpClient = new DefaultHttpClient();  
  2. HttpGet get = new HttpGet(url);  
  3.     // 定义一个类处理URL返回的结果  
  4.     ResponseHandler<byte[]> handler = new ResponseHandler<byte[]>() {  
  5.         public byte[] handleResponse(HttpResponse response)  
  6.                 throws ClientProtocolException, IOException {  
  7.             HttpEntity entity = response.getEntity();  
  8.             if (entity != null) {  
  9.                 return EntityUtils.toByteArray(entity);  
  10.             } else {  
  11.                 return null;  
  12.             }  
  13.         }  
  14.     };  
  15.     // 不同于 httpClient.execute(request),返回值是HttpResponse;返回值右ResponseHandler决定  
  16.     byte[] charts = httpClient.execute(get, handler);  
  17.     FileOutputStream out = new FileOutputStream(fileName);  
  18.     out.write(charts);  
  19.     out.close();  
  20.   
  21.     httpClient.getConnectionManager().shutdown();  

 

 

参考文献

 

 

分享到:
评论

相关推荐

    commons-httpclient-3.0.jar JAVA中使用HttpClient可以用到

    总结,`commons-httpclient-3.0.jar`在JAVA中的应用,不仅提供了一种简单易用的HTTP客户端实现,还具有丰富的特性和扩展性,对于理解和实现网络通信具有重要的学习价值。然而,随着技术的进步,开发者应关注并适时...

    commons-httpclient-3.1.rar

    HttpClient 3.1是其的一个稳定版本,虽然现在已经有了更新的版本(如4.x系列),但在某些场景下,3.1版本仍然有着良好的兼容性和性能。 二、HttpClient的核心组件 1. `HttpConnectionManager`:管理HTTP连接的组件...

    httpClient-4.5.jar及源码

    源码学习有助于解决实际问题,例如调试、优化性能,或者扩展HttpClient以满足特定需求。 总结来说,HttpClient是一个强大且灵活的HTTP客户端工具,4.5版本增加了对HTTP/2的支持和性能优化。通过`httpclient-4.5.jar...

    最全最新httpclient4.3.3

    文档可以帮助开发者了解如何使用HttpClient的各种功能,源代码则提供了深入学习和定制的可能。 1. Jar包:包含了HttpClient的运行库,可以直接引入到项目中使用。 2. 文档:详细介绍了HttpClient的API、配置和使用...

    Httpclient教程

    2. **异常处理**:`Httpclient`提供了一系列异常类,用于处理网络错误、服务器错误等情况。 3. **连接管理**:可以使用`PoolingHttpClientConnectionManager`来管理HTTP连接池,提高性能。 #### 六、总结 通过本...

    HttpClient4.3教程.PDF

    通过本教程的学习,我们了解了Apache HttpClient的基本概念及其在Java开发中的应用价值。它不仅为开发者提供了丰富的API来处理HTTP通信,而且具有良好的性能表现和广泛的适用性。无论是构建Web应用还是实现复杂的...

    httpClient4.1入门教程

    本文将通过一系列步骤和示例来帮助你入门HttpClient4.1。 ### 1. 环境准备 在开始使用HttpClient之前,你需要确保已经安装了Java环境,并在项目中引入HttpClient的依赖库。通常,你可以通过Maven或Gradle等构建工具...

    httpclient 4.3.6

    《HttpClient 4.3.6:HTTP 客户端库详解》 HttpClient 是 Apache 开源组织提供的一款强大的 HTTP 客户端通信库,...通过深入学习和实践,开发者可以充分利用 HttpClient 提供的能力,构建出高效、可靠的网络应用程序。

    C# 操作http协议学习总结下.docx

    【C# 操作HTTP协议学习总结】 在C#编程中,操作HTTP协议通常是网络通信的基础,用于发送和接收数据。System.Net.Http命名空间提供了一系列类和方法,使得开发者能够方便地进行HTTP请求和响应的处理。本文将重点讨论...

    xFire+spring

    完成上述步骤后,工程会包含一系列必要的库文件,如activation、commons-beanutils、commons-codec、commons-httpclient、commons-logging、jaxen、jaxws-api、jdom、jsr173_api、mail和saaj-api等。 通过这个简单...

    c#程序开发--范例宝典--第12章

    6. 文件系统操作:C#提供了一系列的类库用于与文件系统交互,如File、Directory等。在这一章中,你可能学习如何读写文件、创建和删除目录,以及如何进行文件流操作。 7. 网络编程:C#也支持网络编程,可以用来创建...

    java模拟淘宝登录源码

    总结来说,这个Java模拟淘宝登录源码主要展示了如何使用HttpClient进行网络请求,处理登录过程中的数据交互,并依赖其他Apache Commons库提高代码效率和功能。通过学习和理解这段代码,开发者可以更好地掌握HTTP通信...

    某硅谷java9新特性学习完整视频,课件,源码

    - **HttpClient**类提供了异步请求处理的能力,可以通过调用`.sendAsync()`方法发送异步请求。 - **HttpRequest**和**HttpResponse**接口定义了请求和响应的基本结构,使得编写网络客户端变得更加简单和直观。 ####...

    Java学习笔记(javase)

    这份笔记可能是作者在深入学习Java SE的过程中,对关键概念、语法和特性进行总结的结果。 Java的学习通常从基础语法开始,包括变量、数据类型、运算符、流程控制(如if语句、switch、for、while循环)等。接着会...

    安卓实践:计算器、简单商城

    ### 安卓实践:计算器、简单商城 ...综上所述,本课程通过一系列实践项目,全面介绍了安卓开发的基础知识和技术要点,旨在帮助学生快速掌握安卓开发的核心技能,并能够在实际工作中灵活运用这些技能。

    elasticsearch-analysis-ik-7.2.0

    为了更好地满足中文处理的需求,社区开发了一系列的插件,其中“elasticsearch-analysis-ik”是针对Elasticsearch进行中文分词处理的重要插件。本文将详细解析“elasticsearch-analysis-ik-7.2.0”这个版本的插件,...

    java私塾全笔记+1-15章pdf

    - **字节流与字符流**:InputStream、OutputStream、Reader、Writer的基本用法,以及Buffered系列流的缓冲功能。 - **对象序列化**:理解序列化机制,如何实现Serializable接口,以及反序列化的操作。 6. **多...

    s2深入.NET平台和C#编程课后、上机、指导练习答案项目案例和PPT

    本资源包"**s2深入.NET平台和C#编程课后、上机、指导练习答案项目案例和PPT**"提供了一系列丰富的学习材料,旨在帮助学习者巩固理论知识,提升实战技能。 首先,"课后和上机答案"部分是学习过程中必不可少的参考...

Global site tag (gtag.js) - Google Analytics