【Linux】进程通信----管道通信

> 作者:დ旧言~
> 座右铭:松树千年终是朽,槿花一日自为荣。

> 目标:理解进程通信----管道通信

> 毒鸡汤:有些事情,总是不明白,所以我不会坚持。早安!

> 专栏选自:Linux初阶

> 望小伙伴们点赞????收藏✨加关注哟????????

????前言

当我们创建两个进程,希望它们可以相互沟通,我的内容你可以读,我的内容你可以写,这种联系我们就需要我们的管道,这个管道就可以达成两个进程或者更多进程相互通信,那这个关系在Linux中是如何实现的呢,我们又该如何理解呢?

⭐主体

学习【Linux】静态库和动态库咱们按照下面的图解:

???? 什么是进程间通信


???? 进程间通信介绍

什么是进程间通信?

进程具有独立性,每个进程都有自己的PCB,所以进程间需要通信,并且通信的成本一定不低(通信的本质:OS需要直接或者间接给通信双方的进程提供“内存空间”,并且要通信的进程,必须看到一份公共的资源)

图解:

如何去通信

  • 采用标准的做法:System V进程间通信(聚焦在本地通信,如共享内存)、POSIX进程间通信(让通信过程可以跨主机)。
  • 采用文件的做法:管道-基于文件系统(匿名管道、命名管道)

管道通信的特点:

是面向字节流、占用内存空间、只能单向传输、有固定的大小和缓冲区等。

总结:

而我们所说的不同通信种类本质就是:上面所说的资源,是OS中的哪一个模块提供的。如文件系统提供的叫管道通信;OS对应的System V模块提供的…,(成本不低是因为我们需要让不同的进程看到同一份资源。


???? 进程间通信目的

进程间通信的目的:

  • 数据传输:一个进程需要将它的数据发送给另一个进程
  • 资源共享:多个进程之间共享同样的资源
  • 通知事件:一个进程需要向另一个或一组进程发送消息,通知它(它们)发生了某种事件(如进程终止时要通知父进程)
  • 进程控制:有些进程希望完全控制另一个进程的执行(如Debug进程)

为什么要有进程间通信?

有时候我们需要多进程协同的,完成某种业务内容。比如管道。

图解:


???? 进程间通信分类

进程间通信分类:(匿名管道和命名管道

  • 匿名管道是只能在父子进程间使用的,它通过pipe()函数创建,并返回两个文件描述符,一个用于读,一个用于写。
  • 命名管道是可以在任意进程间使用的,它通过mkfifo()或mknod()函数创建一个特殊的文件,然后通过open()函数打开,并返回一个文件描述符,用于读或写。

???? 管道的实现和理解


???? 管道介绍

概念:

管道是Unix中最古老的进程间通信的形式。我们把从一个进程连接到另一个进程的一个数据流称为一个"管道"

分析:

任何一个文件包括两套资源:1.file的操作方法 2.有属于自己的内核缓冲区,所以父进程和子进程有一份公共的资源:文件系统提供的内核缓冲区,父进程可以向对应的文件的文件缓冲区写入,子进程可以通过文件缓冲区读取,此时就完成了进程间通信,这种方式提供的文件称为管道文件。管道文件本质就是内存级文件,不需要IO。

两个进程如何看到同一个管道文件:fork创建子进程完成

管道创建时分别以读和写方式打开同一个文件(如果只读或者只写,子进程也只会继承只读或只写,父子双方打开文件的方式一样,无法完成单向通信);父进程创建子进程,父进程以读写打开,子进程也是以读写打开(一般而言,管道只用来进行单向数据通信);关闭父子进程不需要的文件描述符,完成通信。


???? 匿名管道

概念:

我们通过文件名区分文件,但是如果当前进程的文件没有名字,这样的内存级文件称为匿名管道。让两个进程看到同一个文件,通过父进程创建子进程,子进程继承文件地址的方式,看到同一个内存级文件,此时内存级文件没有名称就是匿名管道了。匿名管道能用来父进程和子进程之间进行进程间通信。


1.pipe

作用及其使用:

  • 创建一个管道只需要调用pipe,注意头文件,返回值,以及函数的参数。
  • 头文件为#include <unistd.h>,调用成功返回0,调用失败返回-1。参数是输出型参数。
SYNOPSIS
       #include <unistd.h>
       int pipe(int pipefd[2]);
DESCRIPTION
    pipe() creates a pipe,pipefd[0]  refers  to  the  read end of the pipe.  pipefd[1] refers to the write end of the pipe.
RETURN VALUE
       On success, zero is returned.  On error, -1 is returned, and errno is set appropriately.

创建Makefile文件

mypipe:mypipe.cc
	g++ mypipe.cc -o mypipe
 
.PHONY:clean
clean:
	rm -f mypipe

创建管道文件,打开读写端

#include <iostream>
#include <unistd.h>
#include <cassert>

using namespace std;
int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);

    //0,1,2->3,4
    //[0]:读取  [1]:写入
    cout<<"fds[0]:"<<fds[0]<<endl;//3
    cout<<"fds[1]:"<<fds[1]<<endl;//4
    return 0;
}

因此,fds[0]:3代表读取,fds[1]:4代表写入;

fork子进程:

#include <iostream>
#include <unistd.h>
#include <cassert>
#include <sys/types.h>
#include <sys/wait.h>
using namespace std;
int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);

    //fork
    pid_t id = fork();
    assert(id>=0);
    if(id==0)
    {
        //子进程通信

        exit(0);
    }
    //父进程通信
    n = waitpid(id,nullptr,0);
    assert(n==id);
    return 0;
}

关闭父子进程不需要的文件描述符,完成通信(子进程写入,父进程读取)

#include <iostream>
#include <unistd.h>
#include <cassert>
#include <sys/types.h>
#include <sys/wait.h>
#include <string>
#include <cstdio>
#include <cstring>
#include <unistd.h>
using namespace std;

int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);
    //fork
    pid_t id = fork();
    assert(id>=0);
    if(id==0)
    {
        //子进程通信:子进程进行写入,关闭读
        close(fds[0]);
        //通信
        const char*s = "这是子进程,正在进行通信";
        int cnt = 0;
        while(true)
        {
            cnt++;
            char buffer[1024];
            snprintf(buffer,sizeof buffer,"child->parent say:%s[%d][%d]",s,cnt,getpid());
            //写端写满的时候,在写会阻塞,等对方进行读取
            write(fds[1],buffer,strlen(buffer));//系统接口
            sleep(1);//一秒写一次
        }
        //退出前关闭子进程
        close(fds[1]);
        exit(0);
    }
    //父进程通信:父进程进行读取,关闭写
    close(fds[1]);
    //通信
    while(true)
    {
        char buffer[1024];
        //管道中如果没有数据,读端在读,默认会直接阻塞当前正在读取的进程
        ssize_t s = read(fds[0],buffer,sizeof(buffer)-1);
        if(s>0) buffer[s] = 0;
        cout<<"Get Message# "<<buffer<<"|mypid:"<<getpid()<<endl;
    }

    n = waitpid(id,nullptr,0);
    assert(n==id);
    
    //结束前关闭
    close(fds[0]);
    return 0;
}

2.读写特征

管道读写特征:

  • 1.读快写慢

分析:

  • 子进程休眠时,不在写入,父进程在读取(如果管道中没有数据,读端在读,此时默认会直接阻塞当前正在读取的进程)

代码:

#include <stdio.h>
#include <unistd.h>
#include <assert.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <sys/wait.h>
#include <string.h>
#include <stdlib.h>
int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);
    pid_t id = fork();
    assert(id >= 0);
    if (id == 0) // 子进程
    {
        // 子进程通信,关闭子进程的读取端,即子进程进行写入
        close(fds[0]);
        const char *s = "你好,我是子进程,正在进行通信";
        int cnt = 0;
        while (1)
        {
            cnt++;
            char buffer[1024];
            snprintf(buffer, sizeof buffer, "child -> parent say:%s [%d], [%d]", s, cnt, getpid());
            write(fds[1], buffer, strlen(buffer));
            sleep(50); // 每一秒写一次
        }
        close(fds[1]); // 退出子进程前关闭文件写入端
        exit(0);
    }
    // 父进程
    close(fds[1]); // 父进程关闭写入端,即父进程进行读取
    while (1)
    {
        char buffer[1024];
        printf("!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!\n");
        ssize_t s = read(fds[0], buffer, sizeof(buffer) - 1);
        printf("888888888888888888888888888888888888!!\n");
        if (s > 0)
            buffer[s] = 0;
        printf("Get Message : %s | mypid = %d\n", buffer, getpid());
    }
    n = waitpid(id, NULL, 0);
    assert(n == id);
    close(fds[0]); // 退出程序前,关闭读取端
    return 0;
}

  • 2.读慢写快

分析:

  • 读取管道的进程一直不进行读取,而写端一直在写入。写端可以向管道内写入,但是管道是固定大小的缓冲区,不断的只写不读管道会被写满。满了以后就不能再写入了,此时写端会处于阻塞状态。

文件mypipe.cc

#include <stdio.h>
#include <unistd.h>
#include <assert.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <sys/wait.h>
#include <string.h>
#include <stdlib.h>

int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);
    pid_t id = fork();
    assert(id >= 0);
    if (id == 0) // 子进程
    {
        // 子进程通信,关闭子进程的读取端,即子进程进行写入
        close(fds[0]);
        const char *s = "你好,我是子进程,正在进行通信";
        int cnt = 0;
        while (1)
        {
            cnt++;
            char buffer[1024];
            snprintf(buffer, sizeof buffer, "child -> parent say:%s [%d], [%d]", s, cnt, getpid());
            write(fds[1], buffer, strlen(buffer));
            printf("count: %d\n", cnt);
        }
        close(fds[1]); // 退出子进程前关闭文件写入端
        exit(0);
    }
    // 父进程
    close(fds[1]); // 父进程关闭写入端,即父进程进行读取
    while (1)
    {
        sleep(50); // 父进程不读
        char buffer[1024];
        ssize_t s = read(fds[0], buffer, sizeof(buffer) - 1);
        printf("Get Message : %s | mypid = %d\n", buffer, getpid());
    }
    n = waitpid(id, NULL, 0);
    assert(n == id);
    close(fds[0]); // 退出程序前,关闭读取端
    return 0;
}

拓展:

如果休息sleep(2),这种情况,写端是将数据塞到管道内,管道读取是安装指定大小读取(并非一行一行的读取,最初安装一行来读取是因为写入的慢,一次只写一行数据,数据就被读取了)。

  • 3.写入关闭,读到0

子进程写入端关闭:

#include <stdio.h>
#include <unistd.h>
#include <assert.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <sys/wait.h>
#include <string.h>
#include <stdlib.h>
int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);
    pid_t id = fork();
    assert(id >= 0);
    if (id == 0) // 子进程
    {
        // 子进程通信,关闭子进程的读取端,即子进程进行写入
        close(fds[0]);
        const char *s = "你好,我是子进程,正在进行通信";
        int cnt = 0;
        while (1)
        {
            cnt++;
            char buffer[1024];
            snprintf(buffer, sizeof buffer, "child -> parent say:%s [%d], [%d]", s, cnt, getpid());
            write(fds[1], buffer, strlen(buffer));
            printf("count: %d\n", cnt);
            break;
        }
        close(fds[1]); // 退出子进程前关闭文件写入端
        exit(0);
    }
    // 父进程
    close(fds[1]); // 父进程关闭写入端,即父进程进行读取
    while (1)
    {
        sleep(2); // 父进程不读
        char buffer[1024];
        ssize_t s = read(fds[0], buffer, sizeof(buffer) - 1);
        if (s > 0)
        {
            buffer[s] = 0;
            printf("Get Message : %s | mypid = %d\n", buffer, getpid());
        }
        else if (s == 0) // 写入端关闭,读到文件末尾了
        {
            printf("read: %d\n", s);
            break; // 关闭读取端
        }
    }
    n = waitpid(id, NULL, 0);
    assert(n == id);
    close(fds[0]); // 退出程序前,关闭读取端
    return 0;
}

  • 4. 读取端关闭,写入端直接关闭

关闭读取端后,写入端就没有意义了,因此OS会给写入的进程发送信号,终止该进程。

#include <stdio.h>
#include <unistd.h>
#include <assert.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <sys/wait.h>
#include <string.h>
#include <stdlib.h>
int main()
{
    int fds[2];
    int n = pipe(fds);
    assert(n == 0);
    pid_t id = fork();
    assert(id >= 0);
    if (id == 0) // 子进程
    {
        // 子进程通信,关闭子进程的读取端,即子进程进行写入
        close(fds[0]);
        const char *s = "你好,我是子进程,正在进行通信";
        int cnt = 0;
        while (1)
        {
            cnt++;
            char buffer[1024];
            snprintf(buffer, sizeof buffer, "child -> parent say:%s [%d], [%d]", s, cnt, getpid());
            write(fds[1], buffer, strlen(buffer));
            printf("count: %d\n", cnt);
        }
        close(fds[1]); // 退出子进程前关闭文件写入端
        printf("子进程关闭写入端\n");
        exit(0);
    }
    // 父进程
    close(fds[1]); // 父进程关闭写入端,即父进程进行读取
    while (1)
    {
        sleep(2); // 父进程不读
        char buffer[1024];
        ssize_t s = read(fds[0], buffer, sizeof(buffer) - 1);
        if (s > 0)
        {
            buffer[s] = 0;
            printf("Get Message : %s | mypid = %d\n", buffer, getpid());
        }
        break; // 关闭读取端
    }
    close(fds[0]); // 退出程序前,关闭读取端
    printf("父进程关闭读取端\n");
    n = waitpid(id, NULL, 0);
    assert(n == id);
    return 0;
}

3.管道特征

1.管道的生命周期随进程,进程退出,管道释放

2.管道可以用来进行具有血缘关系的进程间通信(常用于父子通信)

3.管道是面向字节流的

4.半双工—单向通信(特殊)

5.互斥与同步机制——对共享资源进行保护的方案

???? 命名管道

概念:

我们前面已经知道:匿名管道应用的一个限制就是只能在具有共同祖先(具有亲缘关系)的进程间通信。那如果两个毫不相干的进程间通信交互呢?如果我们想在不相关的进程之间交换数据,可以使用FIFO文件来做这项工作,它经常被称为命名管道。命名管道是一种特殊类型的文件

1.mkfifo

使用说明

NAME
       mkfifo - make FIFOs (named pipes)

SYNOPSIS
    #include <sys/types.h>
    #include <sys/stat.h>
    int mkfifo(const char *pathname, mode_t mode);
RETURN VALUE
       On success mkfifo() returns 0.  In the case of an error, -1 is returned (in which case, errno is set appropriately).

在当前路径下直接创建命名管道:

mkfifo named_pipe

往管道文件写东西:


2.创建管道文件

分为三个文件:comm.hpp:公共文件(同一份资源),server.cc:读取端,clinet.cc:写入端

comm.hpp文件(同一份资源)

#pragma once
#include <iostream>
#include <sys/types.h>
#include <sys/stat.h>
#include <string>
#include <cerrno>
#include <cstring>
#include <cassert>

#define NAMED_PIPE "/tmp/mypipe.name"

bool createFifo(const std::string &path)
{
    umask(0);
    int n = mkfifo(path.c_str(),0666);
    if(n==0) return true;
    else
    {
        std::cout<<"errno:"<<errno<<"err string:"<<strerror(errno)<<std::endl;
        return false;
    }
}

server.cc:

#include "comm.hpp"
int main()
{
    bool ret = createFifo(NAMED_PIPE);
    assert(ret);
    (void)ret;
    return 0;
}

运行:


3.删除管道文件

使用说明

unlink   注意头文件,函数的参数以及返回值这三个主要部分:

NAME
       unlink - remove a directory entry

SYNOPSIS
       #include <unistd.h>

       int unlink(const char *path);
RETURN VALUE
       Upon successful completion, 0 shall be returned. Otherwise, -1 shall be returned and errno set to indicate the error. If -1 is returned, the named file shall not be changed.

在comm.hpp中封装好删除的函数:

void removeFifo(const std::string &path)
{
    int n = unlink(path.c_str());
    assert(n==0);
    (void)n;//防止n没使用而警告
}

在server.cc中进行调用:

#include "comm.hpp"

int main()
{
    bool ret = createFifo(NAMED_PIPE);
    assert(ret);
    (void)ret;

    removeFifo(NAMED_PIPE);
    return 0;
}

至此,创建和删除管道文件的操作我们实现完毕。下面进入通信环节

4.通信

说明:

其实在了解完了匿名管道之后,对于命名管道我们能够更好的理解:

client.cc(写端):

#include "comm.hpp"

int main()
{
    int wfd = open(NAMED_PIPE,O_WRONLY);
    if(wfd<0) exit(1);
    //write
    char buffer[1024];
    while(true)
    {
        std::cout<<"Please Say:";
        fgets(buffer,sizeof(buffer),stdin);
        //if(strlen(buffer)>0) buffer[strlen(buffer)-1] = 0;
        ssize_t n = write(wfd,buffer,strlen(buffer));
        assert(n==strlen(buffer));
        (void)n;
    }
    close(wfd);
    return 0;
}

server.cc(读端):

#include "comm.hpp"

int main()
{
    bool ret = createFifo(NAMED_PIPE);
    assert(ret);
    (void)ret;

    int  rfd = open(NAMED_PIPE,O_RDONLY);
    if(rfd<0) exit(1);

    //read
    char buffer[1024];
    while(true)
    {
        ssize_t s = read(rfd,buffer,sizeof(buffer)-1);
        if(s>0)
        {
            buffer[s] = 0;
            std::cout<<"client->server" <<buffer<<std::endl;
        }
        else if(s==0)
        {
            std::cout<<"client quit,俺也一样"<<std::endl;
            break;
        }
        else
        {
            std::cout<<"err string:"<<strerror(errno)<<std::endl;
            break;
        }
    }
    close(rfd);
    removeFifo(NAMED_PIPE);
    return 0;
}

进行通信:

读端多出一行空行:写端输入之后多按了回车,修改为buffer[strlen(buffer)-1] = 0;

if(strlen(buffer) > 0) buffer[strlen(buffer) - 1] = 0;

???? 管道通信的优化

管道通信的优点有以下几点:

  • 管道通信是简单易用的,只需要使用系统调用 pipe 或 mkfifo 就可以创建一个管道文件,然后使用文件操作函数来读写数据。
  • 管道通信是安全的,匿名管道只能用于具有亲缘关系的进程间通信,命名管道可以通过文件权限来控制访问。
  • 管道通信是面向字节流的,不需要事先约定数据的格式,也不需要考虑字节序的问题。

管道通信的缺点有以下几点:

  • 管道通信是单向的,如果要实现双向通信,需要创建两个管道。
  • 管道通信是阻塞式的,如果读端没有数据可读或者写端没有空间可写,进程会被阻塞。
  • 管道通信是缓冲区有限的,如果写入数据过多而读出数据过少,会导致缓冲区满而无法继续写入。
  • 管道通信是不可靠的,如果读端或者写端被关闭,另一端可能会收到错误的信号或者返回值。

改进管道通信性能和效率的方法有以下几点:

  • 使用双向管道,可以实现两个进程之间的双向通信,而不需要创建两个单向管道。双向管道可以通过 socketpair 系统调用来创建,返回两个文件描述符,分别表示管道的两端。
  • 使用非阻塞模式,可以避免进程在读写管道时被阻塞,提高并发性能。非阻塞模式可以通过 fcntl 系统调用来设置文件描述符的 O_NONBLOCK 标志。
  • 使用自定义协议,可以根据通信的需求和场景,设计合适的数据格式和交互方式,提高数据传输的效率和可靠性。自定义协议可以包括数据包的长度、类型、校验码等信息。
  • 调整管道缓冲区的大小,可以根据数据量的大小和频率,选择合适的缓冲区大小,避免缓冲区溢出或者空闲浪费。管道缓冲区的大小可以通过 fcntl 系统调用来设置 F_SETPIPE_SZ 标志,并且可以通过 /proc/sys/fs/pipe-max-size 来修改最大容量。

????结束语 

       今天内容就到这里啦,时间过得很快,大家沉下心来好好学习,会有一定的收获的,大家多多坚持,嘻嘻,成功路上注定孤独,因为坚持的人不多。那请大家举起自己的小手给博主一键三连,有你们的支持是我最大的动力????????????,回见。

​ 

上一篇:提示词工程入门-使用文心一言4.0-通义千问-GPT4-Claude3通用提示技巧测试-4.整体结果分析


下一篇:mysql8.0免安装版windows