Linux管道及重定向

shell有一定了解的人都知道,管道重定向是 Linux 中非常实用的 IPC 机制。在shell中,我们通常使用符合‘|’来表示管道,符号‘>’‘<’表示重定向。那么管道重定向的真实含义(定义)又是什么呢?

管道

管道的定义

管道就是一个进程与另一个进程之间通信的通道,它通常是用作把一个进程的输出通过管道连接到另一个进程的输入。它是半双工运作的,想要同时双向传输需要使用两个管道。管道又可以分为匿名管道和命名管道,而shell中使用到的是匿名管道,所以本文仅描述匿名管道。

例如命令ls | grep main.c,使用了管道来连接了两条命令来执行,能够快速地让我们知道当前目录下是否有 main.c 文件。

管道的本质是内存中的缓冲区,可以看作是打开到内存中的文件。所以需要使用两个文件描述符来索引它,一个表示读端,一个表示写端。并且规定,数据只能从读端读取、只能往写端写入

创建管道

使用函数pipe()可以创建匿名管道,需要包含头文件 unistd.h,示例代码:

int fd[2];
pipe(fd);

首先创建一个 2 个元素的整型数组,然后将该数组作为pipe()的参数,pipe()执行成功后,数组元素 fd[0]的值就会变成所创建的管道的读端的文件描述符,fd[1]就会变成写端的文件描述符。至此管道就算创建成功了。

把管道作为标准输入输出

管道创建成功后,就可以直接使用 read()write()函数对管道进行数据的读写。而因为shell中都是使用标准输入输出对管道进行读写的,例如ls | grep main.c就是将 ls 的标准输出写到了管道写端,而 grep 的标准输入则从管道读端读取,所以本文也只描述此方法。

示例代码如下:

int fd[2];
pipe(fd);
pid=fork(); if(0==pid)//execute next command in child process
{
dup2(fd[0],0);//redirect standard input to pipe(read)
close(fd[0]);
close(fd[1]); if(0!=execvp(cmd0[0],cmd0))
printf("No such command!\n");
exit(EXIT_SUCCESS);
}
else//execute current command in current process
{
dup2(fd[1],1);//redirect standard output to pipe(write)
close(fd[0]);
close(fd[1]); if(0!=execvp(cmd1[0],cmd1))
printf("No such command!\n"); exit(EXIT_SUCCESS);
}
  • 首先是创建一个管道,然后创建子进程,子进程会继承这一个

    管道,也就保证了父进程与子进程操作的是同一个管道(管道的继承与普通变量不同)。如果我们希望在子进程中执行管道的读端的程序例如ls | grep main.c中的grep main.c;在父进程中执行管道的写端的程序,例如ls | grep main.c中的ls。那么,

  • 在子进程中,先调用dup2(fd[0],0);此函数就是将标准输入的文件描述符 0,指向了管道的读端。

文件描述符,本质是非负整数,通常是小整数;它是一个索引,通过该索引可以找到对应的文件。例如,标准输入、标准输出、标准错误的文件描述符默认是 0、1、2 。当进程需要从标准输入中读取数据时,就会通过 0 索引找到标准输入所对应的内存缓冲区来读取数据。

  • 假设此时管道读端的文件描述符为 3、写端文件描述符为 4 。

  • 调用dup2(fd[0],0),实际上就是将文件描述符 3 指向的文件表项赋值给了文件描述符 0,而文件描述符 0 正是进程默认的标准输入。所以此时,当进程需要从标准输入读取数据时,进程就会通过文件描述符 0 来找到管道读端所对应内存缓冲区。

  • 从而实现了通过标准输入来读取管道的数据,也可以说是,将管道的读端重定向到了标准输入。管道的写端与标准输入的关系也与此类似,此处不再赘述。

  • 调用dup2(fd[0],0)之后还需要调用close()函数将管道原有的文件描述符关闭,关闭的意思是文件描述符 3 和 4 不再索引到管道或者其他文件,也就是说此时使用 read 函数从文件描述符 3 中是读取不到管道的数据的了,并不是说关闭管道的意思。

  • 完成管道的设置之后,就可以通过 exec 族函数来执行外部命令了。需要注意的是,调用 exec 族函数并不会把管道这种 IPC 资源覆盖或者重新初始化。

文件重定向

文件重定向其实与上面管道重定向到标准输入输出很类似,甚至可以直接采用上面所说的方法来实现。但是此处将讲述一种更加简洁的方法实现。

实例代码如下:

char fileName[20]="out.txt";
freopen(fileName,"w",stdout);//redirect stdout to fileName

以上两行简单的代码就实现了,将该进程的标准输出重定向到了文件 out.txt ,甚至一行就可以实现。执行以上代码后,当前进程的所有标准输出,也就是 printf()之类的输出全都会被写到文件 out.txt,显示屏将不会有输出。

而将进程的标准输入重定向到文件 in.txt 的代码如下:

char fileName[20]="in.txt";
freopen(fileName,"r",stdin);//redirect stdin to fileName

其中的核心函数就是freopen()

至此又可以给我们的stupidshell添加管道和重定向的功能了。完整代码实现请参考StupidShell代码仓库

Linux管道及重定向的更多相关文章

  1. Linux入门-7 Linux管道、重定向以及文本处理

    Linux管道.重定向以及文本处理 1 Linux多命令协作:管道及重定向 管道和重定向 2 Linux命令行文本处理工具 文件浏览 基于关键字搜索-grep 基于列处理文本-cut 文本统计-wc ...

  2. linux管道和重定向

    管道 管道应该是等左边的程序执行完,才使用左边的程序的输出执行右边的程序. 但是在测试的时候,如果左边的程序无限循环且不等待的输出,那么左边的程序执行时右边的程序也会执行,个人感觉这是linux的机制 ...

  3. linux 管道与重定向

    命令行shell数据流有如下定义: 通过管道和重定向可以控制CLI的数据流

  4. Linux——管道与重定向

    参考资料: 极客学院IBMdeveloperWorks 重定向标准I/O Linux shell(比如Bash)接收或发送序列和字符串流形式的输入或输出.每个字符都独立于与之相邻的字符.字符没有被组织 ...

  5. Linux基本配置和管理 2 ---- Linux多命令协作----管道及重定向

    1 管道和重定向 1 在Linux中大多数命令都很简单,很少出现复杂的命令,每个命令只是实现一个简单的功能,我们可以通过组合不同的命令来实现复杂的功能 2 在Linux中几乎所有的命令返回的数据都是纯 ...

  6. Linux入门基础 #9:管道及重定向

    本文出自   http://blog.csdn.net/shuangde800 ------------------------------------------------------------ ...

  7. linux文件管理之管道与重定向

    ============================================================== 内容提要: 输入输出重定向.管道: 重定向的作用: 文件描述符 0 1 2 ...

  8. Linux入门基础(五):Linux管道,重定向,文本处理

    多命令协作:管道及重定向 在Linux中,大多数命令都很简单,每个命令往往只实现一个或几个很简单功能. 我们可以通过将不同功能的命令组合起来一起使用,达到完成某个复杂功能的目的 CLI下几乎所有的命令 ...

  9. linux 学习管道 和重定向

    开源文化的理念之一 就是不要重新发明轮子 在linux 系统中大多是都是非常简单的命令,每个命令都是实现一个或者几个简单的功能,我们可以将不同的命令组合在一起 来达到复杂的功能的目的,在linux中因 ...

随机推荐

  1. printf打印字节调试

    void print(BYTE *data, INT len) { INT x = 0; INT y = 0; if(data == NULL) { return; } for(x = 0; x &l ...

  2. [b0002] Hadoop HDFS cmd常用命令练手

    目的: 学会HDFS CLI 常用操作 环境: Hadoop 2.6.4 伪分布式版 环境搭建参考本博客前篇文章: 伪分布式 hadoop 2.6.4 帮助: hadoop@ssmaster:~$ h ...

  3. jsp页面格式化时间 fmt:formatDate格式化日期

    使用fmt函数需在jsp中引入 <%@ taglib prefix="fmt" uri="http://java.sun.com/jsp/jstl/fmt" ...

  4. 学习51cto中美团中的小知识点--组件实现按需求加载

    1====>vue.20脚手架的创建 cnpm install --global vue-cli 全局安装脚手架 vue init webpack my-project 创建项目 Use ESL ...

  5. RedisTemplate操作Redis(spring-data-redis)

    参看博客:https://www.cnblogs.com/songanwei/p/9274348.html 使用文档:StringRedisTemplate+RedisTemplate使用说明

  6. C++ 学习六 operator关键字(重载)

    转载:http://blog.sina.com.cn/s/blog_4b3c1f950100kker.html operator是C++的关键字,它和运算符一起使用,表示一个运算符函数,理解时应将 o ...

  7. Tensorflow之变量赋值输出1+2+3+4+5+6+7+8+...

    一.导入tensorflow import tensorflow as tf 二.定义计算图 (1)常量初始化 constant_name = tf.constant(value) (2)变量初始化 ...

  8. Pwn-pwn-200

    题目地址 ttp://www.whalectf.xin/files/47a658e388a0c505fc07b6ee48a4a2e2/binary_200 32位,开启了NX和Canary保护 存在字 ...

  9. day55_9_19模型层的操作

    一.配置settings. 如果是queryset对象 那么可以点query直接查看该queryset的内部sql语句 将以下代码放入settings中.就可以实现当使用orm时查看sql语句: LO ...

  10. Appium 定位

    使用过 Appium 的都知道,元素的定位方式有很多种,具体使用哪一种,主要看业务的需要和自己的使用爱好.下面总结一下,Appium 到底有哪些定位方式,定位的元素以下面截图指定的元素为例子:   这 ...