`

transfer-encoding:chunked的含义

阅读更多

        Transfer-Encoding: chunked表示输出的内容长度不能确定,普通的静态页面、图片之类的基本上都用不到这个。

        但动态页面就有可能会用到,但我也注意到大部分asp,php,asp.net动态页面输出的时候大部分还是使用Content-Length,没有使用Transfer-Encoding: chunked。

        不过如果结合:Content-Encoding: gzip 使用的时候,Transfer-Encoding: chunked还是比较有用的。

        记得以前实现:Content-Encoding: gzip 输出时,先把整个压缩后的数据写到一个很大的字节数组里(如 ByteArrayOutputStream),然后得到数组大小 -> Content-Length。

        如果结合Transfer-Encoding: chunked使用,就不必申请一个很大的字节数组了,可以一块一块的输出,更科学,占用资源更少。

        这在http协议中也是个常见的字段,用于http传送过程的分块技术,原因是http服务器响应的报文长度经常是不可预测的,使用Content-length的实体搜捕并不是总是管用。

        分块技术的意思是说,实体被分成许多的块,也就是应用层的数据,TCP在传送的过程中,不对它们做任何的解释,而是把应用层产生数据全部理解成二进制流,然后按照MSS的长度切成一份一份的,一股脑塞到tcp协议栈里面去,而具体这些二进制的数据如何做解释,需要应用层来完成,所以在这之前,一块整体应用层的数据需要等它分成的所有TCP  segment到达对方,重新组装后,应用程序才使用自己的解码方法还原它们。

        HTTP1.1采用了持久的连接,也就是一次TCP的连接不马上释放,允许许多的请求跟响应在一个TCP的连接上发送,所以客户机与服务器需要某种方式来标示一个报文在哪里结束和在下一个报文在哪里开始。简单的方法是使用content-length,但这只有当报文长度可以预先判断的时候才起作用,而对于动态的内容或者在发送数据前不能判定长度的情况下,可以使用分块的方法来传送编码。

        如图:

        Web服务器有时生成HTTPResponse无法在Header就确定消息大小的,这时一般来说服务器将不会提供Content-Length的头信息,而采用Chunked编码动态的提供body内容的长度。

        进行Chunked编码传输的HTTP Response会在消息头部设置:Transfer-Encoding: chunked,表示Content Body将用Chunked编码传输内容。

        Chunked编码使用若干个Chunk串连而成,由一个标明长度为0的chunk标示结束。每个Chunk分为头部和正文两部分,头部内容指定下一段正文的字符总数(十六进制的数字)和数量单位(一般不写),正文部分就是指定长度的实际内容,两部分之间用回车换行(CRLF)隔开。在最后一个长度为0的Chunk中的内容是称为footer的内容,是一些附加的Header信息(通常可以直接忽略)。


        这里面只有一个有意义的chunke以及一个footer。第一个chunk,头部是3134这两个字节,表示的是1和4这两个ascii字符,被http协议解释为十六进制数14,也就是十进制的20。后面紧跟0d0a,再接着是20个字节的chunk正文(图中的011e~0131)。

        后面再接着0d0a,然后就是footer了,30表示ascii字符0,http解释为长度是0(也说明了这是最后一个chunk),后面紧跟0d0a,然后正文部分为空,再接0d 0a表示结束。

 

文章来源:http://blog.csdn.net/whatday/article/details/7571451

  • 大小: 38.8 KB
  • 大小: 221.2 KB
  • 大小: 33.1 KB
分享到:
评论

相关推荐

    boost之http请求及chunked解析

    3. 异步读取响应头,检查“Transfer-Encoding”字段确认是否使用了chunked编码。 4. 如果使用了chunked编码,开始异步读取每个chunk: - 读取十六进制的chunk大小。 - 读取chunk数据,直到达到指定的字节数。 - ...

    HTTP chunked方式传输的C语言解析示例

    1. **读取头部信息**:首先,你需要解析HTTP响应头,寻找`Transfer-Encoding: chunked`字段,这表明后续的数据将以chunked编码的形式传输。同时,也要注意`Content-Type`头,因为它定义了数据的类型。 2. **理解...

    http协议进阶之Transfer-Encoding和HttpCore实现详解

    Chunked-Body = *chunk last-chunk trailer CRLF。Chunked格式的数据传输过程是将数据切割成一系列的块数据传输,每个块数据的长度由Chunk-Size指定,然后紧接着是该块数据的内容,以CRLF标志结束。最后以“0”CRLF...

    P21_创建Company资源POST_P20_HTTP方法的安全性与幂等性_Routine.Api2020_2_7.rar

    Transfer-Encoding:chunked Location:http://localhost:5000/api/companies/61156544-d8bd-4787-a79a-a484dd9a382c 在浏览器中输入http://localhost:5000/api/companies/61156544-d8bd-4787-a79a-a484dd9a382c ...

    HTTP大文件传输方案

    - **实现方式**: 服务器可通过设置`Transfer-Encoding: chunked`响应头来启用分块传输。客户端接收到数据后,根据十六进制的长度标识解析数据块。 ##### 3.2 数据压缩 - **支持情况**: 常见的压缩算法如gzip、...

    关于PHP 如何用 curl 读取 HTTP chunked 数据

    在HTTP协议中,`Transfer-Encoding: chunked`是一种用于分块传输编码的方式,常用于服务器无法预先知道响应体总长度的情况。这种方式将响应体分成多个块(chunks),每一块都有一个大小标识,最后以一个零长度的块...

    spring-mvc-msgpack-sample:Spring MVC + MessagePack 示例

    Spring MVC + MessagePack 示例 跑步 $ mvn spring-boot:run $ curl -v "localhost:8080/calc?... Transfer-Encoding: chunked < Date: Fri, 16 Jan 2015 15:00:26 GMT < leftd right , answer

    serverless-testing-examples:无服务器测试示例

    无服务器测试示例 该存储库说明了一些测试使用构建的应用程序的策略。 我已经在“媒介:上发表了有关此的文章 设置 安装Node 8.10(AWS Lambda支持的最新运行时)...Transfer-Encoding: chunked access-control-allow

    weblogic不兼容客户端的解决办法

    解决方法一:关闭 Transfer-encoding: chunked WebLogic 服务器提供了一个配置选项,用于关闭 chunked 编码的传输方式。这可以通过 WLST(WebLogic Scripting Tool)工具来实现。具体步骤如下: 1. 启动 WLST 工具...

    HTTP常见请求和响应头说明1

    15. Transfer-Encoding: 响应传输的编码方式,如chunked。 16. Vary: 告诉缓存服务器如何根据请求头选择缓存资源。 17. WWW-Authenticate: 身份验证的挑战信息,用于401 Unauthorized响应。 以上是HTTP请求和响应头...

    Burpsuite插件之chunked-coding-converter使用方法1

    5. 在Burp Suite的历史记录中找到相关的请求,检查是否包含`Transfer-Encoding: chunked`的头部。如果有,说明chunked编码已成功应用。 6. 分析响应,确认WAF是否被成功绕过。 参考项目主页和相关文章,可以深入...

    WEB_文件的上传与下载思维导图总结及所用的包

    - 长连接:使用`Transfer-Encoding: chunked`,适合大文件传输。 - Web框架支持:Flask/Django等提供设置响应头和返回文件流的方法。 4. 所用的包: - Flask-Uploads/WTForms-FileField:Flask中的文件上传处理...

    HTTP1.1消息头

    6. Transfer-Encoding:用于指定实体部分的编码方式,目前只能支持 chunked。 7. Upgrade:用于指定客户端支持的通信协议,例如 HTTP/2.0 和 SHTTP/1.3。 8. Via:用于指定代理服务器的名称和协议。 二、请求头 ...

    分块传输绕过WAF进行SQL注入1

    在这种情况下,数据被分割成多个块,并通过`Transfer-Encoding: chunked`头字段告知客户端,数据将以块的形式传输。 分块传输编码的工作原理是,每个数据块都由一个表示块大小的十六进制数字开头,后跟块的实际内容...

    django-eventstream:Django的服务器发送事件

    Django EventStream EventStream为您的Django应用程序提供API终结点,...Transfer-Encoding: chunked Connection: Transfer-Encoding Content-Type: text/event-stream event: message data: {"foo": "bar"} event:

    http响应头首部Content-Length.rar_HTTP_saynvx

    例如,动态生成的内容大小在响应生成之前未知,或者服务器使用"Transfer-Encoding: chunked"编码。这时,服务器会省略"Content-Length",转而使用分块编码来传输数据。 在实际网络开发中,理解和正确使用"Content-...

    flash socket 分块下载源码

    通过HTTP的"Transfer-Encoding: chunked"头字段,服务器可以将大文件分成多个小块发送给客户端,客户端每接收完一块就可以开始处理,无需等待整个文件下载完毕。这种方式使得用户可以实现“边下边播”或“即下即用”...

    php下HTTP Response中的Chunked编码实现方法

    进行Chunked编码传输的HTTP Response会在消息头部设置: Transfer-Encoding: chunked 表示Content Body将用Chunked编码传输内容。 Chunked编码使用若干个Chunk串连而成,由一个标明长度为0的chunk标示结束。每个...

    HTTP协议的chunked编码

    Transfer-Encoding: chunked ``` 2. **数据块**:响应体接着是零个或多个数据块,每个块由块大小(以十六进制表示)和块数据组成。块大小后跟一个CRLF(回车换行符,即`\r\n`),然后是块数据,最后是另一个CRLF...

Global site tag (gtag.js) - Google Analytics