1. 非阻塞I/O

低速系统调用时可能会使进程永远阻塞的一类系统调用,包括以下调用:
(1)某些文件类型你(网络socket套接字、终端设备、管道)暂无可使用数据,则读操作可能会使调用者永远阻塞
(2)如果数据不能立即被(1)中文件类型接受,则写操作会使调用者永远阻塞
(3)某些进程间通信函数
 
非阻塞I/O使我们可以调用open、read、write这样的I/O操作,并使这些操作不会永远阻塞,如果这种操作不能完成,则调用立即出错返回
 
对于一个给定的文件有两种方法对其指定非阻塞I/O:
(1)调用open打开文件时,指定 O_NONBLOCK标志
(2)对于一个打开的描述符,可以调用fcntl函数,将文件设置为非阻塞I/O
 

2. fcntl记录锁

当一个进程正在读或修改文件的某个部分时,它可以组织其它进程修改同一文件区,它锁定的只是文件的一个区域(也可能是整个文件)
  1. struct flock {
  2. short l_type; /* F_RDLCK, F_WRLCK, F_UNLCK */
  3. off_t l_start; /* offset in bytes, relative to l_whence */
  4. short l_whence; /* SEEK_SET, SEEK_CUR, SEEK_END */
  5. off_t l_len; /* length in bytes, 0 means lock to EOF */
  6. pid_t l_pid; /* returned with F_GETLK */
  7. };
  1. #include <fcntl.h>
  2. int lock_reg(int fd, int cmd, int type, off_t offset, int whence, off_t len)
  3. {
  4. struct flock lock;
  5. lock.l_type = type;
  6. lock.l_start = offset;
  7. lock.l_whence = whence;
  8. lock.l_len = len;
  9. int ret = fcntl(fd, cmd, &lock);
  10. return ret;
  11. }

如果两个进程相互等待对方持有并且锁定的资源时,则这两个进程处于死锁状态

3. select

  1. #include <select.h>
  2. int select(int maxfds, fd_set* readfds, fd_set* writefds, fd_set* exceptfds, struct timeval* timeout);

中间三个参数 readfds, writefds, exceptfds是指向描述符集的指针,每个描述符集存放在一个fd_set中:

这三个参数指针任意一个可以为空指针,表示对相应状态并不关心。如果三个指针都是空指针,则select提供了比sleep更精确的计时器,因为sleep只能等待整数秒,

而select的struct timeval可以精确到微秒

  1. int FD_ISSET(int fd, fd_set* set);
  2. void FD_CLR(int fd, fd_set* set);
  3. void FD_SET(int fd, fd_set* set);
  4. void FD_ZERO(fd_set* set);

select的第一个参数maxfds是三个描述符集中最大的fd数值加1,也可以将此参数设置为FD_SETSIZE,表明最大的描述符数

  1. fd_set readset, writeset;
  2. FD_ZERO(&readset);
  3. FD_ZERO(&writeset);
  4. FD_SET(, &readset);
  5. FD_SET(, &readset);
  6. FD_SET(, &writeset);
  7. FD_SET(, &writeset);
  8. select(, &readset, &writeset, NULL, NULL);

因为描述符编号从0开始,所以要在最大描述符编号值加1,第一个参数实际上就是要检查的描述符数(从描述符0开始)

select有3个可能的返回值:
(1)返回值-1表示出错
(2)返回值0表示没有描述符准备好或者超时
(3)返回值为正数表示已经准备好的描述符数,该值是三个描述符集中已准备好的描述符之和,如果同一描述符已经准备好读和写,那么返回值中计为2
 

4. readn和writen

  1. int readn(int fd, char* ptr, size_t n)
  2. {
  3. size_t nleft = n;
  4. int nread = ;
  5. while (nleft > ) {
  6. if ((nread = read(fd, ptr, nleft)) < ) {
  7. if (nleft == n) {
  8. return -;
  9. } else {
  10. break;
  11. }
  12. } else if (nread == ) {
  13. break;
  14. }
  15. nleft -= nread;
  16. ptr += nread;
  17. }
  18. return n - nleft;
  19. }
  1. int writen(int fd, char* ptr, size_t n)
  2. {
  3. size_t nleft = n;
  4. int nwrite = ;
  5. while (nleft > ) {
  6. if ((nwrite = write(fd, ptr, nleft)) < ) {
  7. if (nleft == n) {
  8. return -;
  9. } else {
  10. break;
  11. }
  12. } else if (nwrite == ) {
  13. break;
  14. }
  15. nleft -= nwrite;
  16. ptr += nwrite;
  17. }
  18. return n - nleft;
  19. }
 

5. 存储映射I/O mmap

Memory-mapped I/O 使一个外存磁盘文件与内存空间中的一个缓冲区相映射,当从缓冲区中取数据,就相当于读磁盘文件中的相应字节,写情况亦如此
  1. #include <sys/mman.h>
  2. void* mmap(void* addr, size_t len, int prot, int flag, int fd, off_t off);
addr参数指定映射存储区的起始位置,通常设置为0,表示由内核选择该映射区的起始地址
fd指定被映射文件的描述符,len是映射的字节数,off是映射字节在文件中的起始偏移量
 
addr和off的值通常应当是系统虚拟页长度的倍数,因为addr和off常常指定为0,所以这要求一般不重要
因为映射文件的起始偏移量受系统虚拟页大小限制。假定文件长12字节,系统页长512字节,则系统通常提供512字节的映射区,其中后500字节被设置为0,对该500字节的任何修改都不会在文件中反映出来。
  1. #include <unistd.h>
  2. #include <string.h>
  3. #include <sys/mman.h>
  4. #include <fcntl.h>
  5. #include <sys/types.h>
  6. #include <stdio.h>
  7.  
  8. int main(int argc, char* argv[])
  9. {
  10. int fdin = ;
  11. int fdout = ;
  12. char* src = NULL;
  13. char* dst = NULL;
  14. struct stat statbuf;
  15. if (argc != ) {
  16. fprintf(stderr, "usage: %s <fromfile> <tofile>\n", argv[]);
  17. return ;
  18. }
  19. if ((fdin = open(argv[], O_RDONLY)) < ) {
  20. fprintf(stderr, "cannot open %s for reading\n", argv[]);
  21. }
  22. if ((fdout = open(argv[], O_RDWR | O_CREAT | O_TRUNC)) < ) {
  23. fprintf(stderr, "cannot creat %s for writing\n", argv[]);
  24. }
  25. if (fstat(fdin, &statbuf)) {
  26. fprintf(stderr, "fsat error\n");
  27. }
  28.  
  29. if (lseek(fdout, statbuf.st_size - , SEEK_SET) == -) {
  30. fprintf(stderr, "lseek error\n");
  31. }
  32. if (write(fdout, "", ) != ) {
  33. fprintf(stderr, "write error\n");
  34. }
  35.  
  36. if ((src = mmap(, statbuf.st_size, PROT_READ, MAP_SHARED, fdin, )) == MAP_FAILED) {
  37. fprintf(stderr, "mmap error for input\n");
  38. }
  39.  
  40. if ((dst = mmap(, statbuf.st_size, PROT_READ | PROT_WRITE, MAP_SHARED, fdout, )) == MAP_FAILED) {
  41. fprintf(stderr, "mmap error for output\n");
  42. }
  43. memcpy(dst, src, statbuf.st_size);
  44. munmap(src, statbuf.st_size);
  45. munmap(dst, statbuf.st_size);
  46. return ;
  47. }
 
 

APUE 学习笔记(九) 高级I/O的更多相关文章

  1. APUE 学习笔记(十) 高级I/O

    1. Unix IPC(InterProcess Communication) 同一主机的各个进程间的IPC:管道.FIFO.消息队列.信号量.共享存储器 不同主机上的各个进程间IPC:socket套 ...

  2. Hadoop学习笔记(7) ——高级编程

    Hadoop学习笔记(7) ——高级编程 从前面的学习中,我们了解到了MapReduce整个过程需要经过以下几个步骤: 1.输入(input):将输入数据分成一个个split,并将split进一步拆成 ...

  3. 多线程学习笔记九之ThreadLocal

    目录 多线程学习笔记九之ThreadLocal 简介 类结构 源码分析 ThreadLocalMap set(T value) get() remove() 为什么ThreadLocalMap的键是W ...

  4. MDX导航结构层次:《Microsoft SQL Server 2008 MDX Step by Step》学习笔记九

    <Microsoft SQL Server 2008 MDX Step by Step>学习笔记九:导航结构层次   SQL Server 2008中SQL应用系列及BI笔记系列--目录索 ...

  5. python3.4学习笔记(九) Python GUI桌面应用开发工具选择

    python3.4学习笔记(九) Python GUI桌面应用开发工具选择 Python GUI开发工具选择 - WEB开发者http://www.admin10000.com/document/96 ...

  6. Go语言学习笔记九: 指针

    Go语言学习笔记九: 指针 指针的概念是当时学C语言时了解的.Go语言的指针感觉与C语言的没啥不同. 指针定义与使用 指针变量是保存内存地址的变量.其他变量保存的是数值,而指针变量保存的是内存地址.这 ...

  7. APUE学习笔记——10.9 信号发送函数kill、 raise、alarm、pause

    转载注明出处:Windeal学习笔记 kil和raise kill()用来向进程或进程组发送信号 raise()用来向自身进程发送信号. #include <signal.h> int k ...

  8. APUE学习笔记3_文件IO

    APUE学习笔记3_文件IO Unix中的文件IO函数主要包括以下几个:open().read().write().lseek().close()等.这类I/O函数也被称为不带缓冲的I/O,标准I/O ...

  9. matlab学习笔记9 高级绘图命令_2 图形的高级控制_视点控制和图形旋转_色图和颜色映像_光照和着色

    一起来学matlab-matlab学习笔记9 高级绘图命令_2 图形的高级控制_视点控制和图形旋转_色图和颜色映像_光照和着色 觉得有用的话,欢迎一起讨论相互学习~Follow Me 参考书籍 < ...

随机推荐

  1. FTPClient:enterLocalPassiveMode()方法简单说明

    问题:在Java程序中,使用FTPClient下载FTP文件的时候,可以下载到FTP服务器上的文件夹,但是里面的文件没有下载到本地. 分析:这个涉及到FTP在使用的过程中,客户端和服务端连接过程中,端 ...

  2. Java多线程 编写三各类Ticket、SaleWindow、TicketSaleCenter分别代表票信息、售票窗口、售票中心。 售票中心分配一定数量的票,由若干个售票窗口进行出售,利用你所学的线程知识来模拟此售票过程。

    package com.swift; import java.util.ArrayList; import java.util.HashMap; import java.util.List; impo ...

  3. Spring中c3p0连接池的配置 及JdbcTemplate的使用 通过XML配置文件注入各种需要对象的操作 来完成数据库添加Add()方法

    通过配置文件XML方法的配置 可以使用非常简练的Service类 UserService类代码如下: package com.swift; public class UserService { pri ...

  4. 作业题:闰年 if((year%4==0&&year%100!=0)||year&400==0)

    作业题:闰年 if((year%4==0&&year%100!=0)||year&400==0)

  5. MySQL数据库主从切换脚本自动化

    MySQL数据库主从切换脚本自动化 本文转载自:https://blog.csdn.net/weixin_36135773/article/details/79514507 在一些实际环境中,如何实现 ...

  6. hibernate简介以及简单配置

    Hibernate简介: Hibernate是一个开源对象关联关系映射的框架,他对JDBC做了轻量级的封装,使我们可以通过面向对象的思想操作数据库. 为什么要用Hibernate: 1: 对JDBC访 ...

  7. python模块之sys

    sys.argv 命令行参数List,第一个元素是程序本身路径 sys.exit(n) 退出程序,正常退出时exit(0) sys.version 获取Python解释程序的版本信息 sys.maxi ...

  8. C与C++接口相互调用

    转载于:http://blog.csdn.net/lincoln_2012/article/details/50801080 项目中经常使用C和C++混合编程,那么,在调用对方接口时,总是不可避免地出 ...

  9. 光学字符识别OCR-8 综合评估

    数据验证 尽管在测试环境下模型工作良好,但是实践是检验真理的唯一标准.在本节中,我们通过自己的模型,与京东的测试数据进行比较验证.         衡量OCR系统的好坏有两部分内容:(1)是否成功地圈 ...

  10. 大数据学习——akka自定义RPC

    实现 package cn.itcast.akka import akka.actor.{Actor, ActorSystem, Props} import akka.actor.Actor.Rece ...