首页 > 其他分享 >pipe和pipefd

pipe和pipefd

时间:2024-10-12 12:23:09浏览次数:8  
标签:buffer pipefd pipe 管道 进程 close

Linux 中 pipe 的详细介绍

在 Linux 中,pipe 是一个系统调用,用于创建一个管道,这是一种用于进程间通信(IPC)的机制。管道允许两个进程之间进行单向数据传输,通常是一个进程向管道写入数据,而另一个进程从管道读取数据。

管道的工作原理

当 pipe 调用成功时,它会返回两个文件描述符,分别对应管道的两端:pipefd[0] 和 pipefd[1]

  • pipefd[0] 通常用于读取数据。
  • pipefd[1] 通常用于写入数据。

数据从 pipefd[1] 写入后,会存储在内核缓冲区中,直到被 pipefd[0] 的读取操作读取。

创建管道

使用 pipe 系统调用来创建管道:

#include <unistd.h>

int pipe(int pipefd[2]);

如果 pipe 调用成功,它将返回 0;如果失败,则返回 -1,并且 errno 将被设置以指示错误。

管道的用法

以下是一个简单的例子,展示了如何使用 pipe

#include <stdio.h>
#include <unistd.h>
#include <sys/wait.h>

int main() {
    int pipefd[2];
    pid_t cpid;

    // 创建管道
    if (pipe(pipefd) == -1) {
        perror("pipe");
        return 1;
    }

    // 创建子进程
    cpid = fork();
    if (cpid == -1) {
        perror("fork");
        close(pipefd[0]);
        close(pipefd[1]);
        return 1;
    }

    if (cpid == 0) { // 子进程
        // 关闭不需要的文件描述符
        close(pipefd[1]);
        // 读取管道中的数据
        char message[20];
        read(pipefd[0], message, sizeof(message) - 1);
        printf("Received: %s\n", message);
        close(pipefd[0]);
        return 0;
    } else { // 父进程
        // 关闭不需要的文件描述符
        close(pipefd[0]);
        // 写入数据到管道
        const char *message = "Hello, this is the parent!";
        write(pipefd[1], message, strlen(message));
        close(pipefd[1]);
        // 等待子进程结束
        wait(NULL);
        return 0;
    }
}

pipefd 的介绍

pipefd 是一个整数数组,它包含两个元素,用于存储管道的两个文件描述符。在创建管道后,pipefd[0] 和 pipefd[1] 分别被赋予管道的读取和写入端。

  • pipefd[0]:管道的读取端,通常用于从管道中读取数据。
  • pipefd[1]:管道的写入端,通常用于向管道中写入数据。

在上述例子中,pipefd 被用作参数传递给 pipe 函数,并在子进程中用于读取数据,在父进程中用于写入数据。

注意事项

  • 当一个进程关闭管道的任一端时,另一个进程会收到一个 SIGPIPE 信号,除非它已经设置了 SIG_IGN 或 SIG_ERR 处理程序。
  • 管道是单向的,如果你需要双向通信,需要创建两个管道。
  • 管道是阻塞的,这意味着如果管道的另一端没有准备好读取或写入,操作会阻塞直到条件满足。

总结

pipe 是 Linux 中实现进程间通信的一种简单而有效的方法。通过 pipefd,可以访问管道的两个端点,从而实现数据的双向传输。正确使用 pipe 和 pipefd 可以帮助开发者实现高效的进程间通信。

自己总结

pipe创建一个管道

pipe的介绍

1完成这件事:

看图分析

运行结果

#include<iostream>
#include<unistd.h>
using namespace std;
int main()
{
    //创建管道
    //先创建一个pipefd数组
    int pipefd[2];
    //用n接受一下,判断是否成功
    int n = pipe(pipefd);
    if(n<0) return 1;//创建失败了

    //创建成功
    //测试一下文件描述符是3和4
    cout<<"pipefd[0]:"<<pipefd[0]<<"pipefd[1]:"<<pipefd[1]<<endl;
    

    return 0;
}

2完成这件事:

创建一个子进程

 pid_t id = fork();
    if(id < 0)return 2;//创建失败
    if(id == 0)//创建成功
    {
        //子进程

    }
    //父进程

让子进程写入,父进程读取

要想让子进程进程写,就需要在进程中关闭读端

if(id == 0)//创建成功
{
     //子进程
     close(pipefd[0]);
}

同理

//父进程
close(pipefd[1]);

都用完结束后,可以都关掉

    if(id == 0)//创建成功
    {
        //子进程
        close(pipefd[0]);
        //.....
        close(pipefd[1]);
    }
    //父进程
    close(pipefd[1]);
    //.....
    close(pipefd[0]);

IPC code,写通信代码

3这件事也完成了:

结构就有了

然后在pipefd[1]这个管道里写,定义一个Writer函数

    if(id == 0)//创建成功
    {
        //子进程
        close(pipefd[0]);
        //.....IPC code,写通信代码
        //在pipefd[1]这个管道里写
        Writer(pipefd[1]);


        close(pipefd[1]);

        exit(0);//正常退出
    }

同理父进程的        

    //父进程
    close(pipefd[1]);
    //.....IPC code,写通信代码
    //在pipefd[0]这个管道里写
    Reader(pipefd[0]);


    close(pipefd[0]);

//子进程
void Writer(int wfd)
{

}
//父进程
void Reader(int rfd)
{

}

Writer

//子进程
void Writer(int wfd)
{
    string s = "hello,I am child";
    pid_t self = getpid();
    int number = 0;

    char buffer[10];
    while(true)
    {
        buffer[0] = 0;//字符串清空,只是为了提醒阅读代码的人,我把这个数组当字符串了

    }
}

用到snprintf
介绍

将s和self和number放进buffer

  char buffer[100];
    while(true)
    {
        buffer[0] = 0;//字符串清空,只是为了提醒阅读代码的人,我把这个数组当字符串了
        snprintf(buffer,sizeof(buffer),"%s    pid:%d\n",s.c_str(),self);
        cout<< buffer <<endl;
        sleep(1);
    };

用cout打印测试一下,打印成功说明写入buffer成功了

等待进程少不了,子进程exit后需要回收

 //父进程
    close(pipefd[1]);
    //.....IPC code,写通信代码
    //在pipefd[0]这个管道里写
    Reader(pipefd[0]);

    //等待进程缺少不了
    pid_t rid = waitpid(id,nullptr,0);
    if(rid < 0) return 3;//等待失败了

    close(pipefd[0]);

如何把消息发送/写入给父进程

用到了write

用write写入管道(管道也是文件),用strlen,不用+1,不用管\0,因为C语言规定\0结尾,和文件没有关系,wfd写入管道

//子进程
void Writer(int wfd)
{
    string s = "hello,I am child";
    pid_t self = getpid();
    int number = 0;
    char buffer[100];
    while(true)
    {
        buffer[0] = 0;//字符串清空,只是为了提醒阅读代码的人,我把这个数组当字符串了
        snprintf(buffer,sizeof(buffer),"%s    pid:%d  %d\n",s.c_str(),self,number++);
        //用write写入管道(管道也是文件),用strlen,不用+1,不用管\0,因为C语言规定\0结尾,和文件没有关系,wfd写入管道
        write(wfd,buffer,strlen(buffer));
        //cout<< buffer <<endl;
        sleep(1);
    };
}

父进程该怎么读取呢

用到了read,fd是文件描述符,从特定的文件描述符里读取,放在这个buf里,buf的长度是count

这里就需要考虑到\0,因为buffer中需要\0

//父进程
void Reader(int rfd)
{
    char buffer[100];
    while(true)
    {
        buffer[0] = 0;
                                    //用sizeof是为了留个空间放\0
        ssize_t n = read(rfd, buffer, sizeof(buffer));//sizeof!=strlen
        if(n > 0)
        {
            //添加\0,因为要放在buffer数组中读取
            buffer[n]=0;
            cout << "father get a message[" << getpid() <<"]"<< buffer <<endl;
        }
    }
}

运行结果

也会发现:为什么子进程sleep,父进程不sleep,父进程还是会跟着子进程sleep,因为父子进程是要协同的

管道本质

通信是为了更好的发送变化的数据,管道本质上是文件

所以必须要用到系统调用接口来访问管道,其是由系统管理,read和write

,操作系统相当于中介 

结论:管道的特征:

1:具有血缘关系的进程进行进程间通信

2:管道只能单向通信

3:父子进程是会进程协同的,同步与互斥的--保护管道文件的数据安全

4:管道是面向字节流的

5:管道是基于文件的,而文件的生命周期是随进程的

再测试,把子进程sleep去掉,就是让子进程写快一点,父进程sleep几秒,就是让父进程读慢一点,看有什么现象

 管道的四种情况

测试管道大小

把c一直往管道里写,把父进程中休眠50秒

结果差不多64kb

写端退了,测试结果

结果是:

读端正常读,写端关闭,读端就会读到0,表明读到了文件(pipe)结尾,不会被阻塞

read读取成功会返回读到的字符个数,读到结尾返回0

读到结尾父进程也就可以停止读取了,break后去把僵尸的子进程回收

break到这里

最后子进程会被waitpid回收

测试子进程一直写,父进程读一会就退出

定义一个cnt控制退出的时间

这里也要修改一下,加个sleep(5),观察,close提前关闭

结果:通过13号信号杀死 

管道到的应用场景

都会变成一个进程

写一个进程池(pipe_use)

首先创建好文件

创建5个进程

channel通道的意思

cmdfd文件描述符

slaverid代表哪个子进程

把它放进vector容器里

思路步骤

管道创建

void(n),假装使用一下,要不然编译不过

创建父子进程

父进程写,子进程读

子进程要读取,就要关闭自己的写端,父进程同理

子进程中的任务

子进程pid有了管道也有了,就差在父进程添加字段了

先更改一下,在class里构造一下

添加字段

测试一下:结果:文件描述符0,1,2是默认打开,3是从管道里读,4是写入管道

把初始化改造成函数

debug测试函数,纯输入函数

第二步开始控制进程了(想让子进程做什么)

这里打印的rfd都是3,正常吗,文件描述符是可以被子进程继承的

父进程对应的写端拿到的是4-8,子进程拿到的读端fd是3

改变一下,直接从键盘(0号描述符)里读,不从管道(3)里读了,就没有管道的概念了,slaver就不用传参了,父进程通过管道写,子进程通过标准输入读

用到了dup2,将从pipefd[0]中读变成从0开始读

想让父进程固定的向管道里写入指定大小字节的内容,必须读取四个字节,四个字节四个字节的写和读,这里的管道64kb

必须读取四个字节

如果父进程不给子进程发送数据呢?阻塞等待!

开始控制子进程

生成一个随机数种子

可以随机选择任务和选择进程

cmd是任务码,测试一下,父进程控制子进程,父进程发送给子进程(通过cmdcode连续)

在Task.hpp里

要用到函数指针

main中的任务了就属于

再把任务装载进来

输出型参数用*

现在开始选择任务和进程

再把main中的任务弄成全局的

进行判断一下

测试 ,comcode和任创建的任务一致

这里的write是父进程进行写入,向子进程发送,子进程不得闲,先写到管道里,等得闲了再读

也可以轮询选择,定义一个计数器,++弄,再%等

整理一下控制代码,这里是输入型参数,只需要读

这样就可以轮询方式选择进程了,不用随机了

结果

清理收尾

思路:把所有文件的描述符都关掉

等待方式设置为0 

read返回0,就是失败了,然后slaver就会调完

结束完就会exit直接退出

打印下更好显示

关闭文件描述符后sleep(10)秒,

然后这10个子进程一瞬间都应该break,然后最后到exit直接就退了,10秒结束后,父进程再回收他       

测试时不弄死循环,用cnt,5秒后自动结束控制,正常退出流程

测试结果

手动控制一下

定义一个select,输入0就是退出了,判断完后,就走到了选择任务


然后直接把cmdcode改为选择的select,-1是因为是从下标0开始的,输入1就是0下标的

测试

bug的地方:

这样会有一些bug(一个子进程不是只有一个写端(每一次子进程的创建都是有继承))

 这样会有一些bug(一个子进程不是只有一个写端(每一次子进程的创建都是有继承))

按理说这样是对的,可是这样就错了

因为下面两个红线还没有关掉,它们进程了最开始的w

这样倒着回收是可以的

正确改法

修改一下

最后一个push_back的就都是父进程的写入fd,

然后加一句这个红线的,每创建子进程后都先把上一次父进程的读端fd关掉就可以了,这里很妙,因为vector一开始是空的

方便看

这里这样就可以了        

管道已经完成

以上是匿名管道 

标签:buffer,pipefd,pipe,管道,进程,close
From: https://blog.csdn.net/2401_83427936/article/details/142467335

相关文章

  • jenkins 2.x pipeline 的特点介绍
    jenkins2.xpipeline的特点介绍声明式和脚本式区别基于代码模式可以让你在不同业务、不同行业、不同规模间落地案例阶段1.在任何可用的代理上,执行流水线或它的任何阶段2.定义"Build"阶段。stage块在脚本化流水线语法中是可选的。然而,在脚本化流水线中实现stag......
  • .net core elsa工作流程框架源码学习之Pipeline管道的理解
    elsa这个框架运用管道来实现切面编程,切面编程的意义我的理解是在于:把业务逻辑和其他与业务不相关的逻辑进行解耦,或者把通用的逻辑:异常处理,日志处理等在不侵入业务逻辑的情况下,服务与这些业务。接下来,详细看看elsa框架的管道是怎么实现的。主要依靠,下面这个委托方法,这个方法返回一......
  • 流水线并行(Pipeline Parallelism)原理详解
    文章目录0.概览1.简单流水并行2.GPipe算法3.GPipe空间复杂度4.PipeDream算法5.总结参考0.概览数据并行(DataParallelism):在不同的GPU上运行同一批数据的不同子集;流水并行(PipelineParallelism):在不同的GPU上运行模型的不同层;模型并行(ModelParallelism):将......
  • 使用MessagePipe实现进程间通信
    使用MessagePipe实现进程间通信 1、MessagePipe介绍可以用于.NET和Unity上面的高性能的内存/分布式消息传递管道。适用于发布/订阅模式、CQRS的中介模式、Prism中的EventAggregator、IPC(进程间通信)-RPC等。支持:依赖注入过滤器管道更好的事件同步/异步带键值的/无键值......
  • Windows管道(Pipes)(一)
      Windows操作系统提供了多种机制用于实现应用程序间的通信及数据的共享,比如剪贴板(Clipboard)、组件对象模型(COM)、数据复制(DataCopy)、动态数据交换(DDE)、文件映射(FileMapping)、邮件槽(Mailslots)、管道(Pipes)、远程过程调用(RPC)、Windows套接字(WindowsSockets)等......
  • 3.5.1 发送并处理IPIPE_CRITICAL_IPI
    点击查看系列文章=》 InterruptPipeline系列文章大纲-CSDN博客原创不易,需要大家多多鼓励!您的关注、点赞、收藏就是我的创作动力!3.5.1发送并处理IPIPE_CRITICAL_IPI      __ipipe_init()最核心的就是__ipipe_enable_pipeline(),接下来对其展开分析!__ipipe_enable_......
  • 3.4.4 __ipipe_init_early之再论虚拟中断
    点击查看系列文章=》 InterruptPipeline系列文章大纲-CSDN博客3.4.4__ipipe_init_early之再论虚拟中断     根据《3.4.1.2IPIPE对Linux中断号的改造》的分析,IPIPE引入的虚拟中断virtualinterrupt的概念,其中前10个虚拟中断本质上是利用SGI实现的IPI中断。IPIPE在......
  • Jenkins Pipeline
    Jenkins有一下几种模式:一般初次接触Jenkins建议使用自由风格(freestyle),可视化的UI页面配合一些Jenkins插件再写一些简单的shell/bat命令即可实现从源码构建到项目部署的整个步骤。当你对Jenkins熟悉度达到一定级别后可以尝试将自由风格的转变成Jenkins的pipeline语法编写Jen......
  • 3.4.3 __ipipe_init_early之初始化root domain
    点击查看系列文章=》 InterruptPipeline系列文章大纲-CSDN博客3.4.3__ipipe_init_early之初始化rootdomain      如下图所示,红框里面的函数当前都是空的,本章还是分析蓝框中的代码片段。第295行,变量ipd指向了ipipe_root即ipd代表rootdomain。第305行,rootdoma......
  • Linux下使用pipe进行父子进程间通信
    引入之前我们介绍了多进程以及创建进程的函数fork,下面我们将继续深入,讨论一下多进程间的通信问题;pipe管道谈论多进程通信,就离不开pipe(管道),这是一个系统调用,用于在UNIX和类UNIX系统(如Linux)上创建一个管道(pipe),实现进程间通信。它创建了一个双向的通信通道,允许一个进程向另一......