`
zhengyun_ustc
  • 浏览: 82588 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

未注意Curl-library Post 1024以上字节时的HTTP/1.1特性导致 HessianPHP 传输数据失败

阅读更多

先列出 HessianPHP 的错误提示:

 

    CURL transport error: transfer closed with outstanding read data remaining


基础知识背景:

1)“Expect: 100-continue”的来龙去脉:
    HTTP/1.1 协议里设计 100 (Continue) HTTP 状态码的的目的是,在客户端发送 Request Message 之前,HTTP/1.1 协议允许客户端先判定服务器是否愿意接受客户端发来的消息主体(基于 Request Headers)。
    即,Client 和 Server 在 Post (较大)数据之前,允许双方“握手”,如果匹配上了,Client 才开始发送(较大)数据
    这么做的原因是,如果客户端直接发送请求数据,但是服务器又将该请求拒绝的话,这种行为将带来很大的资源开销。
    协议对 HTTP/1.1 clients 的要求是:
如果 client 预期等待“100-continue”的应答,那么它发的请求必须包含一个 "Expect: 100-continue" 的头域!

 

2)libcurl 发送大于1024字节数据时启用“Expect:100-continue‘特性:

     这也就是 Laruence 在 2011 年撰文所写的:

在使用 curl 做 POST 的时候,当要 POST 的数据大于 1024 字节的时候,curl 并不会直接就发起 POST 请求,而是会分为两步:
1. 发送一个请求,包含一个 "Expect: 100-continue" 头域,询问 Server 是否愿意接收数据;
2. 接收到 Server 返回的 100-continue 应答以后,才把数据 POST 给 Server;
这是 libcurl 的行为。

 

    zxgfa 在 2012年补充说:
第一,libcurl 在发送大于 1024 字节的 POST 请求时采用了这种方法,但是相对的,它会引起请求延迟的加大。
第二,并不是所有的 web server 都能正确处理并应答“100-continue”,比如 lighttpd,就会返回417”Expectation Failed“,造成请求逻辑出错。
郑昀注1:lighttpd 1.4 版本有此严重问题,于1.5版本修复。
郑昀注2:Resin 于 3.0.5 版本增加了对 Expect: 100-continue 的支持。)

 

3)PHP Curl-library 可以主动封禁此特性:
    有人在 PHP手册::curl_setopt 下留言说:
    PHP curl 遵从 libcurl 的特性。由于不是所有 web servers 都支持这个特性,所以会产生各种各样的错误。如果你遇到了,可以用下面的命令封禁"Expect"头域:    
    <?php

    curl_setopt($ch, CURLOPT_HTTPHEADER, array('Expect:'));
    ?>
    pooy示范代码如下所示:

    http://images.cnblogs.com/cnblogs_com/zhengyun_ustc/255879/o_clipboard%20-%20%e5%89%af%e6%9c%ac%20-%2038.png

 

    图1 You can convince PHP's curl backend to stop doing the 100-continue-thing by setting an explicit request header

 其他知识背景:

 


 问题现象:

通信协议是 Hessian。
调用接口时所传参数在某种极端条件下,POST 的数据长度超过 1024 字节,hessian 报错“CURL transport error: transfer closed with outstanding read data remaining”。
解决:
修改hessian中 CURLOPT 项:
CURLOPT_HTTPHEADER => array("Content-Type: application/binary") 
改为
CURLOPT_HTTPHEADER => array("Content-Type: application/binary","Expect:") 

参考资源:

 

1)2011,Laruence,Expect:100-continue
3)HTTP 1.1 RFC,Use of the 100 (Continue) Status
4)stackoverflow,2009,PHP HTTP POST fails when cURL data > 1024
6)lighttpd,2009,'Expect' header gives HTTP error 417

赠图几枚:

请施主拿去:
http://ww2.sinaimg.cn/bmiddle/6e8138cfjw1e7vf8ouv2jj20c80gfabt.jpg

 

360度后空翻开球:
http://ww3.sinaimg.cn/bmiddle/61ecbb3djw1e7sad5gpmng205k034av6.gif

 

360无死角:
http://ww4.sinaimg.cn/bmiddle/6c55b8b5gw1e7i07zq3avj211s1kwqfv.jpg
0
1
分享到:
评论

相关推荐

    pycurl-7.43.0.3-cp27-cp27m-win-amd64.whl

    Windos下安装pyspider报错:Please specify --curl-dir=/path/to/built/libcurl Windos下安装pyspider报错:Please specify --curl-dir=/path/to/built/libcurl Windos下安装pyspider报错:Please specify --curl-dir=/...

    windows下curl工具 curl-7.71.1-win64-mingw

    curl-7.71.1-win64-mingw是针对Windows 64位系统的版本,它由mingw编译构建,为Windows用户提供了一个轻便、高效的网络数据传输解决方案。 **主要功能与特性:** 1. **多协议支持**:curl支持多种网络协议,使得...

    Errno 14 curl#37 - "Couldn't open file /mnt/repodata/repomd.xml

    总之,`Errno 14 curl#37`错误通常指示了`yum`在尝试访问仓库数据时遇到了问题。通过排查网络、文件系统、仓库配置和本地镜像,通常可以找出问题并解决。对于初学者来说,了解这一过程对于理解Linux系统的包管理机制...

    使用curl-config配置选项

    curl-config 配置选项的使用 curl-config 是一个命令行工具,用于显示关于 curl 和 libcurl 安装的信息。下面是对 curl-config 的详细介绍: curl-config 的使用 curl-config 可以使用多种选项来显示不同的信息。...

    linux下post方法.txt

    根据给定文件的信息,我们可以提炼出以下IT领域的关键知识点,主要围绕Linux环境下使用HTTP POST方法进行数据传输的技术细节。这不仅涉及HTTP协议的基础知识,还包括了在Linux系统中实现网络通信的具体步骤,以及...

    curl-7.71.1-win64-mingw.zip

    总结来说,`curl-7.71.1-win64-mingw.zip` 提供了一个在Windows 64位环境下使用的curl工具,使得开发者和系统管理员能够方便地进行命令行数据传输和调试网络服务,尤其在API接口测试、自动化脚本和数据分析等方面...

    curl-curl-7_53_1 (2).zip

    《深入理解curl库:以curl-curl-7_53_1为例》 curl是一个流行的开源命令行工具和库,用于传输数据到或从服务器,支持多种协议,如HTTP、HTTPS、FTP、FTPS等。这里我们将聚焦于curl库的一个特定版本——curl-7_53_1...

    curl https://github.com/curl/curl.git

    `curl` 是一个用于传输数据的命令行工具,它支持多种协议,包括 HTTP、HTTPS、FTP 等。在本例中,它被用来与 Git 协议交互,克隆 `curl/curl` 仓库到本地。 描述中的内容与标题相同,再次强调了这个操作是通过 `...

    curl-7.33.0-win64-ssl-sspi

    `curl-7.33.0-win64-ssl-sspi` 是一个针对Windows 64位操作系统的 curl 工具的版本,它包含了 SSL 和 SSPI 的支持。curl 是一个广泛使用的开源命令行工具,用于在命令行界面中传输数据,常用于HTTP、HTTPS、FTP、...

    curl-7.59.0.zip

    1. **HTTP/2支持**:7.59.0版本可能已经支持HTTP/2协议,这是一个比HTTP/1.1更高效、更优化的网络传输协议,能减少延迟并提高数据传输效率。 2. **TLS安全升级**:可能包含更新的TLS库,提高了加密安全性和兼容性,...

    curl-7.72.0_4-win64-mingw.zip

    `curl-7.72.0_4-win64-mingw.zip` 是一个针对Windows平台的curl工具的免安装版本压缩包。curl是一个强大的命令行工具,用于传输数据,支持多种协议,如HTTP、HTTPS、FTP、FTPS等。在IT运维工作中,curl经常被用来...

    api.rar_definitionwir_后台curl模拟post 调接口

    curl是一个强大的命令行工具,常用于在终端中传输数据到服务器或者从服务器获取数据。 首先,我们需要理解什么是`definitionwir`,这可能是一个自定义的术语或者缩写,但在这个上下文中未提供明确的解释。通常情况...

    curl-7.65.3.tar.gz

    《curl-7.65.3.tar.gz:深入解析开源HTTP传输工具curl》 curl,一个强大且广泛使用的命令行工具,用于传输数据至或从服务器,尤其...通过不断迭代更新,curl-7.65.3将继续为用户提供更稳定、高效的网络数据传输体验。

    curl(url语法在windows系统的命令行)

    cURL,全称为客户端URL传输库(Client URL Library),是由Daniel Stenberg开发的一个开源项目,自1997年起提供服务。这个强大的工具允许用户通过命令行界面执行HTTP、HTTPS、FTP、FTPS、TFTP、DICT、FILE和LDAP等...

    WWW-Curl-4.17.tar_curl_www_www-curl_Perl_

    **WWW-Curl-4.17.tar - curl, www-curl 和 Perl 知识点详解** `WWW-Curl-4.17.tar` 是一个压缩包文件,它包含了一个名为 `WWW-Curl` 的模块的第 4.17 版本。这个模块是为 Perl 语言设计的,用于与 `curl` 工具集成...

    curl-7.78.0-win64-mingw.zip

    《curl-7.78.0-win64-mingw:深入理解curl工具与 MingW 环境》 curl,全称为Client URL Library,是一款强大的命令行工具,用于传输数据到或从服务器,支持HTTP、HTTPS、FTP、FTPS等多种协议。其核心功能是通过...

    curl-7.83.1.tar.gz版本更新 资源上传

    `curl`是一个强大的命令行工具,用于在命令行下传输数据到或从互联网。它支持多种协议,包括HTTP、HTTPS、FTP、FTPS等,使得用户可以在终端中方便地下载、上传文件,执行POST请求,甚至发送邮件。`curl-7.83.1.tar....

    curl-7.61.1库(只支持Openssl)

    总的来说,curl-7.61.1库为Windows 32位系统提供了一个可靠且安全的数据传输工具,通过与Openssl的结合,能够在保持高效性能的同时,确保数据传输的安全。对于需要在32位Windows环境中进行网络操作的开发者来说,这...

    curl-7.68.0-win64-mingw.zip

    《深入理解curl-7.68.0-win64-mingw:Windows环境下的网络数据传输利器》 curl,一个强大的命令行工具,用于传输数据,支持多种协议,包括HTTP、HTTPS、FTP、FTPS等,是开发者进行网络请求调试和数据传输的重要工具...

    curl-7.72.0.zip

    总结,curl作为一款强大且灵活的命令行工具,不仅适用于日常的数据传输,还在开发、测试、自动化运维等多个场景中发挥着重要作用。通过深入理解和实践,我们可以更高效地利用curl解决网络通信问题。

Global site tag (gtag.js) - Google Analytics