高性能网络IO编程模型

一、I/O模型简介

在一个 linux 操作系统中,一般分为用户空间和内核空间。

用户空间一般就是我们进行应用程序编程的地方。

内核空间就是 linux 操作系统自己运行的一些系统,比如内存系统,文件系统,进程调度,硬件驱动程序等等,都是操作系统内核进行控制。

处于 2 个不同的空间,那应用程序怎么对内核进行一些操作呢?

应用程序运行在用户空间,是不具备直接操作系统功能的权限。应用程序要访问内核系统的一些功能,需要通过系统调用(System Call)来完成。

具体就是操作系统内核为应用程序提供了一些接口 API(封装的函数),供应用程序使用,来访问操作内核的一些功能。

Linux 中的 I/O 模型是什么?

在用户空间的应用程序与在内核空间的内核系统怎么进行数据交换,交换的方式有哪些?

在《unix网络编程》中总结了 5 种 I/O 模型。

二、5 种IO模型

在 《unix网络编程第1卷》中介绍了 5 种 IO 模型:

  • 阻塞 I/O - Blocking I/O
  • 非阻塞 I/O - Non-Blocking I/O
  • I/O 复用(select,poll和epoll)- I/O Multiplexin
  • 信号驱动 I/O - Signal Driven I/O
  • 异步 I/O(aio_ 系列函数)- Asynchronous I/O

1.阻塞IO模型

应用程序进程发起 IO 系统调用,这里是 recvfrom 函数。这个进程一直阻塞在 recvfrom 调用,直到内核把数据准备好,然后从内核空间拷贝数据到用户空间缓冲区,最后返回数据。

这里进程阻塞的整段时间是指调用 recvfrom 开始到系统返回成功指示,应用进程开始处理数据。

​ (来自《unix网络编程第1卷》第6章)

2.非阻塞IO模型

把套接字接口设置成非阻塞方式,就是告诉内核,请求I/O操作没有数据时,不要使进程阻塞(进程睡眠),而是返回一个错误。

等到内核把数据准备好,被拷贝到应用程序缓冲区,程序返回成功。

​ (来自《unix网络编程第1卷》第6章)

3.IO多路复用模型

把多个接收的 socket FD 注册到 select(多路复用器)上,然后使用一个进程监听 select。只要有一个 socket 上准备好,就返回该 socket 数据。

多路复用函数有select,poll,epoll。

​ (来自《unix网络编程第1卷》第6章)

4.信号驱动IO模型

信号驱动就是内核在 FD(文件描述符)准备好时用信号 SIGIO 通知应用程序。

首先,套接字接口允许信号驱动I/O,通过系统调用 sigacton 安装一个信号处理。此系统调用立即返回,进程继续工作,它是非阻塞的。当

内核数据报准备好时,就为该进程生成一个 SIGIO 信号,给进程发信号。可以立即在信号处理程序中调用 recvfrom 程序读取数据报,

​ (来自《unix网络编程第1卷》第6章)

5.异步IO模型

异步IO是Posix.1的一个扩展,让内核来操作整个数据过程,在内核把数据准备完成后,从内核拷贝到应用进程缓冲区,然后通知应用进程。

接口函数一般以 aio_ 开头。

​ (来自《unix网络编程第1卷》第6章)

三、5种IO模型区别

从上面5种模型可以看出,各个模型都有 2 个阶段。

第一阶段:等待内核准备好数据。

第二阶段:将数据从内核拷贝到用户空间(应用进程缓冲区)

前面4种模型当数据从内核拷贝到应用进程缓冲区时,进程都会阻塞在 recvfrom 的调用。

最后第5种异步IO模型两阶段处理都不同于前面4种IO模型。

​ (来自《unix网络编程第1卷》第6章)

四、参考

linux和unix中的IO模型总结的更多相关文章

  1. Linux设备驱动中的IO模型---阻塞和非阻塞IO【转】

    在前面学习网络编程时,曾经学过I/O模型 Linux 系统应用编程——网络编程(I/O模型),下面学习一下I/O模型在设备驱动中的应用. 回顾一下在Unix/Linux下共有五种I/O模型,分别是: ...

  2. Linux 下的五种 IO 模型

    概念说明 用户空间与内核空间 现在操作系统都是采用虚拟存储器,那么对32位操作系统而言,它的寻址空间(虚拟存储空间)为4G(2的32次方).操作系统的核心是内核,独立于普通的应用程序,可以访问受保护的 ...

  3. Java NIO学习系列六:Java中的IO模型

    前文中我们总结了linux系统中的5中IO模型,并且着重介绍了其中的4种IO模型: 阻塞I/O(blocking IO) 非阻塞I/O(nonblocking IO) I/O多路复用(IO multi ...

  4. 深入理解JAVA I/O系列六:Linux中的IO模型

    IO模型 linux系统IO分为内核准备数据和将数据从内核拷贝到用户空间两个阶段. 这张图大致描述了数据从外部磁盘向运行中程序的内存中移动的过程. 用户空间.内核空间 现在操作系统都是采用虚拟存储器, ...

  5. 深入理解JAVA I/O系列六:Linux中的IO模型(转载的文章非常值得学习)

    From:http://www.cnblogs.com/dongguacai/p/5770287.html IO模型 linux系统IO分为内核准备数据和将数据从内核拷贝到用户空间两个阶段. 这张图大 ...

  6. 浅谈计算机中的IO模型

    IO模型一共有5种: blocking IO #阻塞IO nonblocking IO #非阻塞IO IO myltiplexing #IO多路复用 signal driven IO #信号驱动IO ...

  7. IO调度 | Linux块设备中的IO路径及调度策略

    当文件系统通过submit_bio提交IO之后,请求就进入了通用块层.通用块层会对IO进行一些预处理的动作,其目的是为了保证请求能够更加合理的发送到底层的磁盘设备,尽量保证性能最佳.这里面比较重要的就 ...

  8. [转载] Linux五种IO模型

      转载:http://blog.csdn.net/jay900323/article/details/18141217     Linux五种IO模型性能分析   目录(?)[-] 概念理解 Lin ...

  9. (转载) Linux五种IO模型

    转载:http://blog.csdn.net/jay900323/article/details/18141217     Linux五种IO模型及分析   目录(?)[-] 概念理解 Linux下 ...

  10. 从 Linux 操作系统谈谈 IO 模型(终)

    Linux 为什么要区分内核空间与用户空间? Linux 操作系统的 IO 模型有哪几种?有啥区别? 常说的阻塞现象,到底是咋回事? 网络编程研发时,那块到底耗时最多,代码是否还有优化空间? 前几期的 ...

随机推荐

  1. [转帖]tidb4.0.4使用tiup扩容TiKV 节点

    https://blog.csdn.net/mchdba/article/details/108896766 环境:centos7.tidb4.0.4.tiup-v1.0.8 添加两个tikv节点   ...

  2. [转帖]Centos7 nginx访问日志文件割接

    一.yum安装nginx 二.各文件路径( /etc/nginx/nginx.conf) 1.访问日志路径:access_log /var/log/nginx/access.log main; 2.p ...

  3. [转帖]@Autowired 和 @Resource 的区别

    @Autowired 和 @Resource 的区别 默认注入方式不同 @Autowired 默认的注入方式为byType(根据类型进行匹配),也就是说会优先根据接口类型去匹配并注入 Bean (接口 ...

  4. [转帖]使用 Shell 运算进行进制转换 16进制转10进制

    使用 Shell 运算进行进制转换 工作时候常常遇到一些问题,拿到的数字是16进制的,但是运算的时候是10进制的,shell可以很方便的处理这类的进制转换问题,一种情况是使用 Shell 运算把一个数 ...

  5. ESXi6.5 登录后出现错误 必须 退出的解决办法

  6. 【构造,树】【Loj】Loj6669 Nauuo and Binary Tree

    2023.7.3 Problem Link 交互库有一棵 \(n\) 个点的二叉树,你每次可以询问两个点之间的距离,猜出这棵二叉树.\(n\le 3000\),询问次数上限 \(30000\). 首先 ...

  7. 小Min_25筛小记🐤

    这里的小Min_25筛,可以筛出 $10^11$ 以内所有质数的完全积性函数之和 注意事项: 1. cmd 的题解里面下标写得不清楚,应该是 $S'(p_k-1,k-1)$ 而不是 $S'(p_{k- ...

  8. 报错ValueError: Can't find 'adapter_config.json'

    前言 在做组内2030项目时,我具体做的一个工作是对大模型进行LoRA微调,在整个过程中有许多坑,其中有些值得记录的问题,于是便产生了这篇博客. 问题 我在得到微调好的模型后,需要对模型进行性能测评. ...

  9. 深度学习应用篇-计算机视觉-OCR光学字符识别[7]:OCR综述、常用CRNN识别方法、DBNet、CTPN检测方法等、评估指标、应用场景

    深度学习应用篇-计算机视觉-OCR光学字符识别[7]:OCR综述.常用CRNN识别方法.DBNet.CTPN检测方法等.评估指标.应用场景 1.OCR综述 OCR(Optical Character ...

  10. tensorflow语法【zip、tf.tile、tf.truncated_normal、tf.data.Dataset.from_tensor_slices、dataset中shuffle()】

    相关文章: [一]tensorflow安装.常用python镜像源.tensorflow 深度学习强化学习教学 [二]tensorflow调试报错.tensorflow 深度学习强化学习教学 [三]t ...