`
trophy
  • 浏览: 178652 次
  • 性别: Icon_minigender_1
  • 来自: 济南
社区版块
存档分类
最新评论

mmap read/write 数据读写传输方式

 
阅读更多

利用系统调用函数read()/write()是我们平常用得最多的一种数据读写方式,大多数情况下我们并没有考虑这种数据读写方式的执行效率,因为在很多并不以数据频繁读写为性能瓶颈的应用程序中函数read()/write()消耗的执行时间可以忽略,但是它们内在具体实现和执行效率到底如何呢?下面我们就来进行详细的分析。
函数read()/write()定义在头文件unistd.h内,原型如下:

1
2
3
#include <unistd.h>
ssize_t read(int fildes, void *buf, size_t nbyte);
ssize_t write(int fildes, const void *buf, size_t nbyte);

在这里我并不打算讲解函数read()/write()的源码,简略的描述其执行过程,涉及到的主要调用关系如下图所示:

如果我们的服务器程序,比如nginx采用read()/write()数据读写传输方式,当某客户端发送“GET /index.htm HTTP/1.1”请求时,nginx则需将存放在站点根目录的index.htm文本文件当作响应数据发送给客户端。当没有启用mmap()的情况下,nginx完成这个响应数据的发送工作需要两步,首先利用函数read()将index.htm文本文件数据读入内存,接着利用函数write()将第一步读入内存的数据写到连接套接口描述符来完成响应数据的发送:

如上图所示,nginx应用程序利用read()/write()数据读写传输方式完成响应数据的发送工作一共需要4次上下文切换和4次数据拷贝(即假定为一次read()/write()就将index.htm文本文件数据发送完毕的情况,如果不只一次则切换和拷贝次数将会更多),这些切换和拷贝过程是不是必须的呢?答案是否定的。比如当在启用mmap()的情况下就可以减少一次数据拷贝,此时利用系统调用mmap()将文本文件index.htm数据拷贝到内核缓存区,并将拷贝映射目标地址的起始值返回给nginx应用程序,正是因为nginx应用程序有了这块内核缓存区的映射起始地址并且可以共享这块内核缓存区(系统调用mmap()实现的结果),因此在第一幅图中,从内核Buffer到用户Buffer再到Socket Buffer的拷贝就可以变成一次从内核Buffer到Socket Buffer的直接拷贝:

 

转自: http://lenky.info/?p=1856

分享到:
评论

相关推荐

    mmap测试例程应用实例

    这种方式极大地优化了大文件处理的性能,因为它减少了磁盘I/O的次数,提高了数据的吞吐量。在本实例中,我们将探讨如何使用mmap_test.c这个源码文件来实现mmap的测试。 `mmap_test.c`是主要的源代码文件,它包含了...

    mmap实验源文件源文件实现

    4. **内存映射文件**:对于大文件,mmap比传统的read/write更高效,因为它减少了磁盘I/O次数,数据传输由操作系统直接完成。 二、mmap函数使用 1. **mmap函数原型**:`void* mmap(void* addr, size_t length, int ...

    mmap内核驱动与应用程序

    而`mymap_app.c`是与驱动配合使用的用户空间应用程序,它可能会调用`open()`, `mmap()`, `write()`, `read()`, `munmap()`等系统调用来实现对驱动的控制。比如,通过`mmap()`将驱动提供的设备内存映射到用户空间,...

    16-mmap.rar

    这种方式避免了传统的I/O操作,如read和write函数的系统调用开销,提升了应用程序的性能。在"16-mmap.rar"这个压缩包中,可能包含了关于如何使用mmap进行系统编程的源代码和详细解释。 mmap函数是C语言标准库中的一...

    Mmap设备的方法

    这种方式消除了对`read`和`write`系统调用的需求,从而提高了文件处理效率。 #### 三、示例代码分析 ```c int main() { int fd; char *start; //char buf[100]; char *buf; /* 打开文件 */ fd = open("/dev...

    linux中mmap总结

    Linux中的mmap(内存映射)是一种高效的数据访问机制,它允许将文件或者其他对象直接映射到进程的虚拟内存空间中,使得程序可以直接通过内存访问这些数据,而无需调用read和write等I/O函数。这种方法可以提高I/O操作...

    shiyong_mmap.rar_camera mmap_内存映射

    9. **相关技术对比**:对比内存映射与其他数据传输技术,如read/write、DMA(直接内存访问),分析各自的优缺点。 通过学习这个文档,初学者将能够理解内存映射的基本原理,掌握如何在摄像头应用中使用内存映射,...

    linux-char-driver-by-mmap.zip_linux mmap_mmap

    通过mmap,用户可以直接将设备内存映射到进程地址空间,从而避免了频繁的系统调用,如read和write,这些调用在高并发或大数据量传输时可能会成为性能瓶颈。 在字符驱动中,mmap函数扮演着关键角色。当用户进程调用...

    linux mmap文件内存映射机制

    `mmap`系统调用允许进程将一个文件或其他对象映射到进程的地址空间中,使得文件的内容可以直接通过指针访问,无需通过传统的`read`和`write`系统调用来读写文件内容。这种机制有效地减少了用户态和内核态之间的上...

    ACE文件操作

    使用操作系统级别的读写和定位函数(read/write/lseek) 代码示例中的`Slow_Read_Write_Test`函数演示了如何利用操作系统底层的文件描述符(`ACE_HANDLE`)进行逐个字符的读写操作。这种方式虽然直观,但效率较低...

    use-mmap-method.zip_mmap_space

    描述提到“use mmap method to write a file to own memory space”,这暗示我们将讨论如何通过内存映射来处理文件操作,使得文件内容可以直接在进程的虚拟内存空间中读写。 内存映射文件是一种高效的数据存取方式...

    mmap 驱动代码

    这种方式极大地提高了数据传输效率,并且简化了编程模型。本文将基于给定的代码示例,详细介绍如何在Linux内核中实现一个简单的`mmap`驱动。 #### 二、关键概念 ##### 1. `mmap`机制 `mmap`(内存映射)是一种...

    linux内核空间到用户空间数据传输-Relay.docx

    内核程序使用提供的API接口(如relay_write())写入数据,而用户空间程序则可以通过read()或mmap()进行读取。这种分离的读写机制确保了突发大量数据写入时的效率,避免了因用户空间读取速度较慢而造成的瓶颈。 ...

    Linux设备驱动之mmap设备操作

    通过这种方式,用户可以直接对映射区域进行读写操作,从而达到对文件或设备进行访问的目的,避免了传统 read 和 write 操作的频繁调用。 **函数原型**: ```c void *mmap(void *addr, size_t len, int prot, int ...

    mmap examplecode

    这样,程序可以直接通过内存操作来读写文件,而无需通过系统调用如`read`和`write`。`mmap`在操作系统层面提供了数据共享、缓存优化以及并发访问的优势,尤其在处理大文件时表现出色。 在Linux操作系统中,`mmap`...

    V4L2驱动编程

    - **同步传输**:通过read/write操作直接传输数据。 - **异步传输**:如`VIDIOC_REQBUFS`、`VIDIOC_QBUF`、`VIDIOC_DQBUF`等ioctl调用,用于设置缓冲区、提交缓冲区和提取已完成的缓冲区。 11. **调试与日志**: ...

    mmap作为Linux内存管理的关键之一.docx

    mmap不仅简化了内存操作,还极大地提升了文件读写性能,特别是在大数据处理和多进程通信中扮演着重要角色。 mmap系统调用的工作原理是将文件或对象分割成多个连续的页(page),然后将这些页映射到进程的虚拟地址...

    Linux C大文件的创建和读写速率

    可以使用内存映射文件(`mmap`)技术,让内存直接映射到文件,减少数据移动。 9. **性能测试**: 使用基准测试工具如`hdparm`、`dd`或自定义程序,测量文件的读写速度,评估和优化代码性能。 通过以上方法,我们...

    Linux中直接IO机制的介绍.pdf

    在Linux 2.6.18版本的内核中,直接I/O的实现涉及到了文件系统接口的特殊配置,以及特定的系统调用,如`mmap()`和`read/write`等。使用`O_DIRECT`标志可以启用直接I/O模式。需要注意的是,直接I/O可能会带来额外的...

Global site tag (gtag.js) - Google Analytics