草莓熊Lotso个人主页❄️个人专栏:《C知识分享》 《Linux 入门到实践零基础也能懂》✨生活是默默的坚持毅力是永久的享受 博主简介文章目录前言一. 进程间通信基础认知1.1 进程间通信的核心目的1.2 进程间通信的发展与分类二. 管道的基础概念2.1 管道的定义2.2 管道的核心特性最后总结部分的图片里更全点可以着重看那个三. 匿名管道的创建与 API3.1 匿名管道的创建函数3.2 匿名管道的简单使用示例四. 基于 fork 的匿名管道跨进程通信4.1 fork 共享管道的核心原理4.2 从文件描述符视角理解管道通信4.3 子写父读的完整实战示例以及四个场景分析场景分析挺重要的五. 从内核视角看管道的本质5.1 管道的内核数据结构5.2 管道的内核实现逻辑5.3 管道与普通文件的异同六. 核心要点总结含管道5个特点总结图结尾前言在 Linux 系统中进程是资源分配的基本单位各个进程拥有独立的地址空间进程间的隔离性让数据无法直接互通而进程间通信IPC就是打破这种隔离、实现进程数据交互和协同工作的核心技术。管道作为 Unix 系统中最古老的 IPC 方式也是 Linux 下最基础、最常用的进程间通信手段其设计贴合Linux一切皆文件的核心思想简单易用且能满足亲缘进程间的通信需求。本文将从管道的基础概念出发深入解析匿名管道的创建、工作原理从文件描述符和内核视角带你吃透匿名管道的底层逻辑。声明看到这里博主就准备更换一下自己的配置了首先是语言主要会用cpp了然后云服务器从Centos到Ubuntu文本编辑器选择的vscode和远端进行连接使用。后续要是有时间的话博主会出一期关于配置切换的文章然后链接放在这里。大家可以自己先去查查怎么做其实也是很简单的并不复杂。一. 进程间通信基础认知在学习管道之前我们需要先明确进程间通信的核心目的和分类建立对 IPC 技术的整体认知这能帮助我们更好地理解管道的设计初衷和应用场景。1.1 进程间通信的核心目的进程间通信的本质是实现进程间的数据交互、资源共享和事件协同具体可分为四个方面数据传输一个进程将自身数据发送给另一个进程是最基础的 IPC 需求资源共享多个进程共享同一份系统资源如文件、内存提高资源利用率通知事件进程向其他进程发送事件通知如子进程退出时通知父进程、进程完成任务后通知调度进程进程控制一个进程对另一个进程进行执行控制如调试进程拦截目标进程的异常和陷入实时获取其状态。1.2 进程间通信的发展与分类Linux 的 IPC 技术从 Unix 继承并不断发展整体可分为三大类管道是其中最基础的一类管道包括匿名管道pipe和命名管道FIFO是最基础的 IPC 方式基于文件系统实现System V IPC包括共享内存、消息队列、信号量由 System V 系统引入基于内核的 IPC 资源管理实现POSIX IPC遵循 POSIX 标准的 IPC 方式是对 System V IPC 的改进包括 POSIX 共享内存、消息队列、信号量等。管道作为最原始的 IPC 方式虽然功能简单但却是理解 Linux 进程间通信和文件系统的关键也是实现其他复杂 IPC 的基础。二. 管道的基础概念2.1 管道的定义管道是一种半双工的数据流通信方式本质是内核中的一块缓冲区它将一个进程的标准输出与另一个进程的标准输入相连形成一条单向的数据流通道。我们可以把管道理解为进程间的 “一根水管”数据从一端写入从另一端读出实现单向的通信。在 Linux 命令行中我们经常使用的管道符|就是管道的典型应用例如who | wc -lwho进程的标准输出被重定向到管道的写端wc -l进程的标准输入被重定向到管道的读端内核中的管道缓冲区作为中间介质完成两个进程间的数据传递。我们还可以使用下图中这样的实验来看一下管道从图中我们可以看出最后他们三个指令的父进程都是bash的他们之间是具有血缘关系的进程2.2 管道的核心特性最后总结部分的图片里更全点可以着重看那个管道的设计贴合 Linux一切皆文件的思想其核心特性可总结为在文章的最后我们还会有更全面点的总结这里可以简单看下半双工通信数据只能沿一个方向流动若需双向通信需创建两个管道基于缓冲区管道的实质是内核缓冲区数据写入后暂存于内核直到被另一个进程读取文件式操作管道通过文件描述符操作读写接口与文件一致read/write符合 Linux 文件操作规范亲缘进程专属匿名管道仅支持具有共同祖先的亲缘进程父进程与子进程、兄弟进程间通信。引入关于匿名管道的两个初步理解图可以看完再继续往下细节的学习三. 匿名管道的创建与 API匿名管道是最基础的管道类型通过系统调用pipe创建其核心 API 简单且易用是实现亲缘进程间通信的首选。3.1 匿名管道的创建函数#includeunistd.hintpipe(intpipefd[2]);函数参数pipefd整型数组是输出型参数用于保存管道的读、写文件描述符pipefd[0]管道的读端仅用于读取管道中的数据pipefd[1]管道的写端仅用于向管道中写入数据。返回值成功返回 0失败返回 - 1并设置errno表示错误原因。注意调用pipe函数的进程会同时持有管道的读端和写端若要实现两个进程间的单向通信需要在进程创建后关闭各自无用的文件描述符避免数据读写异常3.2 匿名管道的简单使用示例下面的示例实现了一个基础的匿名管道通信从键盘读取数据写入管道再从管道读取数据输出到屏幕直观展示管道的读写操作。#includecstdio#includecstdlib#includecstring#includeunistd.hintmain(){intfds[2];charbuf[100];intlen;if(pipe(fds)-1){std::perror(make pipe);std::exit(1);}while(std::fgets(buf,100,stdin)){lenstd::strlen(buf);if(write(fds[1],buf,len)!len){std::perror(write to pipe);break;}std::memset(buf,0x00,sizeof(buf));if((lenread(fds[0],buf,100))-1){std::perror(read from pipe);break;}if(write(1,buf,len)!len){std::perror(write to stdout);break;}}return0;}该示例中进程自身同时完成管道的写和读操作虽然未实现跨进程通信但清晰展示了管道的基本读写流程通过fd[1]写通过fd[0]读操作接口与普通文件完全一致。四. 基于 fork 的匿名管道跨进程通信匿名管道本身由单个进程创建要实现跨进程通信需要借助fork函数创建子进程 —— 子进程会继承父进程的文件描述符表从而与父进程共享同一个管道的读、写端这是匿名管道实现亲缘进程通信的核心原理。4.1 fork 共享管道的核心原理fork函数创建的子进程会复制父进程的文件描述符表包括父进程创建的管道读、写端文件描述符因此父子进程会共享同一个内核管道缓冲区实现数据互通。其核心步骤分为三步父进程创建管道父进程调用pipe创建管道持有fd[0]读和fd[1]写两个文件描述符父进程 fork 创建子进程子进程继承父进程的文件描述符表同样持有管道的fd[0]和fd[1]关闭无用的文件描述符根据通信方向父、子进程分别关闭无用的读 / 写端实现单向通信。例如要实现父进程读、子进程写则父进程关闭写端fd[1]仅保留读端fd[0]子进程关闭读端fd[0]仅保留写端fd[1]。注意下面图中的是父写子读不过基本逻辑都一样4.2 从文件描述符视角理解管道通信从文件描述符的角度我们可以更清晰地看到父子进程共享管道的过程以父读子写为例✅️步骤 1父进程创建管道父进程的文件描述符表中0、1、2 分别为标准输入、标准输出、标准错误pipe创建的管道分配到 3读端fd[0]和 4写端fd[1]。父进程0(tty)1(tty)2(tty)3(pipe读)4(pipe写)✅️步骤 2父进程 fork 创建子进程子进程复制父进程的文件描述符表此时父子进程的文件描述符 3、4 均指向同一个内核管道缓冲区。父进程0(tty)1(tty)2(tty)3(pipe读)4(pipe写)子进程0(tty)1(tty)2(tty)3(pipe读)4(pipe写)核心关键点父子进程的文件描述符指向同一个内核管道缓冲区这是进程间能通过管道通信的根本原因关闭无用描述符则是为了保证通信的单向性避免出现数据读写的混乱。✅️步骤 3关闭无用文件描述符父进程关闭写端 4子进程关闭读端 3此时管道形成单向的 “子写父读” 通道数据只能从子进程写入父进程读出。父进程0(tty)1(tty)2(tty)3(pipe读)-子进程0(tty)1(tty)2(tty)-4(pipe写)核心关键点父子进程的文件描述符指向同一个内核管道缓冲区这是进程间能通过管道通信的根本原因关闭无用描述符则是为了保证通信的单向性避免出现数据读写的混乱。4.3 子写父读的完整实战示例以及四个场景分析场景分析挺重要的下面的示例实现了子进程向管道写入字符串父进程从管道读取并打印的功能是 “子写父读” 的标准实现#includeiostream#includestring#includeunistd.h// 子进程 wvoidWriteData(intwfd){intcnt1;pid_t idgetpid();while(true){sleep(1);std::string messagehello father process, ;messagecnt: std::to_string(cnt), my pid is: std::to_string(id);write(wfd,message.c_str(),message.size());}}// 父进程rvoidReadData(intrfd){charinbuffer[1024];while(true){ssize_t nread(rfd,inbuffer,sizeof(inbuffer)-1);if(n0){sleep(5);inbuffer[n]\0;std::coutgetpid()# inbufferstd::endl;}}}intmain(){// 1. 创建管道成功intpipefd[2]{0};intnpipe(pipefd);(void)n;// 2. 创建子进程pid_t idfork();if(id0){// 3.形成单向通信的信道// 子进程: wclose(pipefd[0]);// 关掉我不用的这个读WriteData(pipefd[1]);close(pipefd[1]);// 可以关掉exit(0);}else{// 3.形成单向通信的信道// 父进程: rclose(pipefd[1]);// 关掉我不用的这个写ReadData(pipefd[0]);close(pipefd[0]);// 可以关掉}// 0-read 1-wirte// 0-嘴巴-读 1-笔-写// std::cout pipefd[0]: pipefd[0] std::endl;// std::cout pipefd[1]: pipefd[1] std::endl;return0;}通过对上述案例进行一定程度上的修改有一想4种情况大家注意看一下也可以根据我的截图自己改了去试一下。五. 从内核视角看管道的本质从文件描述符视角我们理解了管道的使用流程而从内核视角我们能看透管道的底层实现 —— 管道的本质是内核中的一块缓冲区由两个file结构体指向同一个inode贴合 Linux “一切皆文件” 的设计思想。5.1 管道的内核数据结构在 Linux 内核中管道的底层实现涉及三个核心数据结构file结构体进程的文件描述符表中的每个项都指向一个file结构体记录文件的操作方式、当前偏移量等信息inode结构体用于描述文件的物理属性管道的inode中保存了管道缓冲区的地址、大小、读写位置等核心信息管道缓冲区内核中的一块连续内存是管道实际存储数据的地方。对于匿名管道父子进程的fd[0]和fd[1]会分别指向不同的file结构体但这两个file结构体最终会指向同一个inode结构体而该inode指向内核中的管道缓冲区。5.2 管道的内核实现逻辑当进程对管道执行read/write操作时内核的处理逻辑如下写操作write(fd[1], data, len)内核将数据从进程地址空间复制到管道缓冲区并更新inode中的写位置读操作read(fd[0], buf, len)内核将管道缓冲区中的数据复制到进程地址空间并更新inode中的读位置缓冲区同步内核会保证管道缓冲区的读写同步若缓冲区为空读操作会阻塞若缓冲区满写操作会阻塞。这个上面也有分析到一点。简单来说管道的读写操作本质是进程地址空间与内核缓冲区之间的数据拷贝而两个进程共享同一个内核缓冲区就实现了数据的跨进程传递。补充读写规则的一些了解可以简单看看5.3 管道与普通文件的异同管道的操作接口与普通文件一致但二者在底层实现和使用上有明显区别核心对比如下特性管道普通文件存储介质内核缓冲区磁盘 / 块设备生命周期随进程进程退出释放随文件系统需手动删除数据读写流式读写不可随机访问支持随机访问lseek共享方式仅亲缘进程通过文件描述符共享所有进程可通过路径 / 文件描述符共享数据持久化不持久化读出即删除持久化数据保存在磁盘但二者的核心共性是都遵循 Linux 的文件操作模型通过文件描述符、file结构体、inode结构体实现操作这也是管道能复用文件读写接口的根本原因。六. 核心要点总结含管道5个特点总结图本文从进程间通信的基础出发详细解析了 Linux 匿名管道的核心概念、创建 API、基于 fork 的跨进程通信实现并从文件描述符和内核两个视角深入剖析了匿名管道的底层逻辑核心要点可总结为管道是 Linux 最基础的 IPC 方式本质是内核中的一块缓冲区贴合 “一切皆文件” 的设计思想通过read/write接口操作匿名管道通过pipe函数创建返回读、写两个文件描述符需借助fork实现亲缘进程间通信核心是子进程继承父进程的文件描述符表共享同一个内核管道缓冲区匿名管道通信的标准流程是创管道→fork 子进程→关闭无用文件描述符→读写通信→关闭描述符关闭无用描述符是保证单向通信的关键从文件描述符视角父子进程的文件描述符指向同一个内核管道缓冲区从内核视角管道是由两个file结构体指向同一个inode的内核缓冲区读写操作是进程与内核缓冲区之间的数据拷贝匿名管道是半双工的仅支持亲缘进程间的单向通信若需双向通信需创建两个管道且其生命周期随进程数据不持久化。结尾 我是草莓熊 Lotso若这篇技术干货帮你打通了学习中的卡点 【关注】跟我一起深耕技术领域从基础到进阶见证每一次成长 ❤️ 【点赞】让优质内容被更多人看见让知识传递更有力量 ⭐ 【收藏】把核心知识点、实战技巧存好需要时直接查、随时用 【评论】分享你的经验或疑问比如曾踩过的技术坑一起交流避坑 ️ 【投票】用你的选择助力社区内容方向告诉大家哪个技术点最该重点拆解 技术之路难免有困惑但同行的人会让前进更有方向愿我们都能在自己专注的领域里一步步靠近心中的技术目标结语匿名管道作为最原始的 IPC 方式虽然功能有限但却是理解 Linux 进程间通信、文件系统和内核机制的关键。后面的文章中我们将继续深入讲解管道的读写规则、命名管道FIFO的实现以及管道在进程池中的实际应用带你进一步吃透 Linux 管道技术。创作不易觉得本文有帮助的话欢迎点赞、收藏、关注三连 后续会持续更新 Linux 进程间通信的其他核心技术共享内存、消息队列、信号量等带你从底层吃透 Linux IPC。✨把这些内容吃透超牛的放松下吧✨ʕ˘ᴥ˘ʔづきらど