文章目录

  • 一、进程间通信(IPC)的理解
    • 1.为什么进程间要通信(IPC)
    • 2.如何进行通信
  • 二、匿名管道
    • 1.管道的理解
    • 2.匿名管道的使用
    • 3.管道的五种特性
    • 4.管道的四种通信情况
    • 5.管道缓冲区容量
  • 三、进程池
    • 1.进程池的理解
    • 2.进程池的制作
  • 四、源码
    • ProcessPool.hpp
    • Task.hpp
    • Main.cc

一、进程间通信(IPC)的理解

1.为什么进程间要通信(IPC)

首先进程之间是相互独立的,尽管是父子进程之间,它们虽然资源共享,但当子进程需要修改数据时仍然需要 进行写时拷贝,保持独立性。

而让进程间通信可以实现数据之间的交互,资源共享,事件通知,又或者是让一个进程对另一个进程进行控制。

进程间通信是操作系统中实现进程间协作和数据交换的重要机制 ,它使得多个进程能够共同完成任务,提高系统的效率和可靠性。

2.如何进行通信

进程间通信的原理其实很简单,只需要两个进程共同访问一个资源,而一个进程对资源的更改能被另一进程感知到,从而做出相应的操作。

所以通信的前提是进程之间能够访问同一个资源,而且该资源是公共的,而不是某进程内部的。

IPC 的典型方式对比

在这里插入图片描述

二、匿名管道

1.管道的理解

我们把进程之间通信的介质(资源)叫作管道。
开发者在设计管道技术时文件系统已经比较成熟,所以为了方便管理该资源就使用文件来实现, 而对文件的读写就是通信的过程 ,但它与一般的文件还是有些区别,文件都是储存到磁盘上的,而进程之间通信用的文件并不需要把它储存到磁盘上,它只是作为一个传输介质。

它比较特殊,所以起名为管道。管道其实是一个内存级的文件。

在这里插入图片描述

注意:父子进程之间的管道叫作匿名管道,顾名思义就是没有名字,也不需要名字,因为子进程能够继承下来父进程开辟的管道资源。

2.匿名管道的使用

创建匿名管道常用的接口是:

            int pipe(int pipefd[2]);

需要包含头文件:

            #include<unistd.h>
  • 返回值:创建成功返回0,失败返回-1
  • 参数:这个是一个输出型参数,传入一个int类型长度为2的数组,然后得到
    pipefd[0]:以读的方式打开的文件描述符
    pipefd[1]:以写的方式打开的文件描述符。

示例:

#include <iostream>
#include <sys/types.h>
#include <unistd.h>
int main()
{int pipefd[2];pipe(pipefd);int rfd = pipefd[0],wfd = pipefd[1];pid_t id = fork();if(id == 0){close(wfd);//关闭子进程的写文件,只让它读int k=0;while(true){read(rfd,&k,sizeof(k));printf("read:%d\n",k);}}else{close(rfd);//关闭父进程的读文件,只让它写。int num=0;while(true){write(wfd,&num,sizeof(num));num++;sleep(1);}}return 0;
}

要记住pipefd[2]中哪个是读哪个是写有一个小技巧,0像嘴巴,所以下标为0的是读,1像钢笔,所以1下标是写。

3.管道的五种特性

  1. 匿名管道,只能用来进行具有血缘关系的进程间通信(用于父与子)。
  2. 管道文件,自带同步机制。如上代码示例,父进程写一次休眠一秒,而子进程是一直不断地读,快的一端会迁就于慢的一端,最后实现同步。
  3. 管道是面向字节流的。怎么读与怎么写并没有联系,比如写入“hello world”,但可能读到“hel”,这取决于你要读多少字节。
  4. 管道是单向通信的。也就是a(表示进程)写的时候b读。b写的时候a在读。而不是既在写同时也在读。
  5. 管道(文件)的生命周期是随进程的。进程结束管道也随之销毁。

4.管道的四种通信情况

  • 写慢,读快 — 读端就要阻塞(等待写端写入)。
  • 写快,读慢 —到管道容量满了后,写端就要阻塞(等待读端读取数据,然后就可以覆盖式地继续往管道写入)。
  • 写关闭,读继续 — read就会返回0,表示文件结尾。
  • 写继续,读关闭 — 写端不再有意义,系统会杀掉写端进程。

5.管道缓冲区容量

管道缓冲区容量为64kb,大家可以根据管道的性质与通信特点,自行进行测试。

三、进程池

1.进程池的理解

在程序使用内存的时候,比如vector扩容机制,会提前给你开辟一块空间供你使用,尽管现在用不到,相当于做一下预备。减少开辟空间的频次,从而达到提高效率的效果。

那么进程池也同样,给父进程提前开辟一些子进程,提供父进程使用。其中我们使用匿名管道建立联系。
在这里插入图片描述
在父进程给子进程派发任务时,为了提高效率会让每个子进程均匀地分配到任务(称为负载均匀),而不是把大部分的任务都派发到一个子进程上,通常会有以下策略:

  • 轮询:按顺序一一分配。
  • 随机:随机进行分配。
  • 负载因子:设计一个负载因子,让子进程按负载因子的大小排成一个小根堆,每次取出堆头的子进程派发任务,然后更新负载因子插回到堆中。

2.进程池的制作

在面向对象的编程中最重要的就是对对象的描述与组织,这里我们的核心就是对管道进行管理。那么首先需要一个类对管道进行描述。

class Channel
{
public:Channel(int fd,pid_t id): _wfd(fd),_subid(id){ }//... ...~Channel(){}
private:int _wfd;int _subid;
};

_wfd是该管道对应写端的fd,_subid是该管道对应的子进程的pid。

这里我们不必把rfd(读端fd)加入,因为我们现在对管道的描述组织,目的是方便父进程管理,而rfd是给子进程用的,所以不用添加为变量。

这里我们就以轮询的方式派发任务,刚才创建的Channel相当于对管道的描述,接下来创建ChannelManage进行组织。这里选择使用数组来管理,派发任务方式选择轮询,所以需要记录下一个需要派发到的管道的下标。

class ChannelManage
{
public:ChannelManage():_next(0){}//... ...~ChannelManage(){}
private:vector<Channel> _channels;int _next;
};

接下来还需要创建一个类对整体的进程池做管理。

class ProcessPool
{
public:ProcessPool(int num) : __process_num(num){}// ... ...~ProcessPool(){}
private:ChannelManage _cm;int _process_num;
};

其中_process_num表示需要创建多少子进程,这是由使用者来决定的。

在ProcessPool中我们准备实现这些方法

  • bool Start():用于创建子进程。
    由于我们是要生成多个通道所以需要循环来进行,而单趟循环需要做以下这些操作:

    1.创建管道,然后创建子进程。(这样能让子进程继承到管道信息)

    2.关于子进程:写端关闭,然后执行Work(),最后把读端关闭,并exit退出。

    3.关于父进程:读端关闭,然后把wfd,pid存入_cm中。

  • void Work(int rfd):用于子进程读取任务码并执行命令。

  • void Run():用于获取并派发任务。

  • void Stop():用于关闭写端并回收子进程。

最后为方便测试我们还需要一个管理任务的类和方法。我们可以单独创建一个Task.hpp文件。

typedef void (*task_t)();class TaskManage
{
public:TaskManage(){   //随机数种子srand((unsigned int)time(nullptr));}int Code(){   //随机生成任务码(数组下标)return rand()%_tasks.size();}void Execute(int code){   //执行任务_tasks[code]();}// ... ...~TaskManage(){}
private:vector<function<task_t>> _tasks;//用于储存任务的数组
};

然后需要在ProcessPool中放入TaskManage成员变量,并在ProcessPool的构造函数中完成对_tasks中内容的插入。具体操作参考下面源码。

四、源码

ProcessPool.hpp

#ifndef _PROCESS_POOL_HPP_
#define _PROCESS_POOL_HPP_#include <iostream>
#include <vector>
#include <unistd.h>
#include <sys/wait.h>
#include "Task.hpp"
using namespace std;//先描述
class Channel
{
public:Channel(int fd,pid_t id): _wfd(fd),_subid(id){_name = "channel-" + to_string(_wfd) + "-" + to_string(_subid);}~Channel(){}void Send(int code){int n = write(_wfd,&code,sizeof(code));(void)n;}void Close(){close(_wfd);}void Wait(){pid_t rid = waitpid(_subid, nullptr, 0);(void)rid;}int Fd(){return _wfd;}pid_t SubId(){return _subid;}string Name(){return _name;}private:int _wfd;pid_t _subid;string _name;//int _loadnum;
};//再组织
class ChannelManager
{
public:ChannelManager(): _next(0){}~ChannelManager(){}void Insert(int wfd,pid_t subid){_channels.emplace_back(wfd,subid);// Channel c(wfd,subid);// _channels.push_back(move(c));}Channel& Select(){auto& c = _channels[_next];_next++;_next %= _channels.size();return c;}void PrintChannel(){for(auto& channel : _channels){cout << channel.Name() << endl;}}void CloseAll(){for(auto& channel: _channels){channel.Close();}}void StopSubProcess(){for(auto& channel: _channels){channel.Close();cout << "关闭: " << channel.Name() << endl;}}void WaitSubProcess(){for(auto& channel: _channels){channel.Wait();cout << "回收: " << channel.Name() << endl;}}void CloseAndWait(){for(auto& channel: _channels){channel.Close();cout << "关闭: " << channel.Name() << endl;channel.Wait();cout << "回收: " << channel.Name() << endl;}//解决方法1 倒着关闭// for(int i = _channels.size() - 1;i >= 0;i--)// {//     _channels[i].Close();//     cout << "关闭: " << _channels[i].Name() << endl;//     _channels[i].Wait();//     cout << "回收: " << _channels[i].Name() << endl;// }}private:vector<Channel> _channels;int _next;
};const int gdefaultnum = 5;class ProcessPool
{
public:ProcessPool(int num): _process_num(num){_tm.Register(PrintLog);_tm.Register(DownLoad);_tm.Register(UpLoad);}~ProcessPool(){}void Work(int rfd){while(true){int code = 0;size_t n = read(rfd,&code,sizeof(code));if(n > 0){if(n != sizeof(code)){continue;}cout << "子进程[" << getpid() << "]收到一个任务码: " << code << endl;_tm.Execute(code);}else if(n == 0){cout << "子进程退出" << endl;break;}else{cout << "读取错误" << endl;break;}}}bool Start(){for(int i = 0;i < _process_num;i++){//1.创建管道int pipefd[2] = { 0 };int n = pipe(pipefd);if(n < 0){return false;}//2.创建子进程pid_t subid = fork();if(subid < 0){return false;}else if(subid == 0){//子进程//关闭子进程继承的哥哥的w端_cm.CloseAll();//3.关闭不需要的文件描述符close(pipefd[1]);Work(pipefd[0]);close(pipefd[0]);exit(0);}else{//父进程//3.关闭不需要的文件描述符close(pipefd[0]);_cm.Insert(pipefd[1],subid);}}return true;}void Debug(){_cm.PrintChannel();}void Run(){//1.选择一个任务int taskcode = _tm.Code();//2.选择一个信道[子进程],负载均衡的选择一个子进程,完成任务auto& c = _cm.Select();cout << "选择了一个子进程: " << c.Name() << endl;//3.发送任务c.Send(taskcode);cout << "发送了一个任务码: " << taskcode << endl;}void Stop(){//关闭父进程//_cm.StopSubProcess();//回收所有的子进程//_cm.WaitSubProcess();_cm.CloseAndWait();}private:ChannelManager _cm;int _process_num;TaskManager _tm;
};#endif

Task.hpp

#pragma once#include <iostream>
#include <vector>
#include <ctime>
using namespace std;typedef void (*task_t)();void PrintLog()
{cout << "我是一个打印日志的任务" << endl;
}void DownLoad()
{cout << "我是一个下载的任务" << endl;
}void UpLoad()
{cout << "我是一个上传的任务" << endl;
}class TaskManager
{
public:TaskManager(){srand((unsigned int)time(nullptr));}~TaskManager(){}void Register(task_t t){_tasks.push_back(t);}int Code(){return rand() % _tasks.size();}void Execute(int code){if(code >= 0 && code < _tasks.size()){_tasks[code]();}}private:vector<task_t> _tasks;
};

Main.cc

#include "ProcessPool.hpp"int main()
{//创建进程池对象ProcessPool pp(gdefaultnum);//启动进程池pp.Start();//自动派发任务int cnt = 10;while(cnt--){pp.Run();sleep(1);}//回收,结束进程池pp.Stop();return 0;
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如若转载,请注明出处:http://www.pswp.cn/bicheng/90401.shtml
繁体地址,请注明出处:http://hk.pswp.cn/bicheng/90401.shtml
英文地址,请注明出处:http://en.pswp.cn/bicheng/90401.shtml

如若内容造成侵权/违法违规/事实不符,请联系英文站点网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

深度分析Java内存回收机制

内存回收机制是Java区别于C/C等语言的核心特性之一&#xff0c;也是Java开发者理解程序性能、解决内存相关问题&#xff08;如内存泄漏、OOM&#xff09;的关键。 核心目标&#xff1a; 自动回收程序中不再使用的对象所占用的内存&#xff0c;防止内存耗尽&#xff0c;同时尽量…

uniapp “requestPayment:fail [payment支付宝:62009]未知错误“

解决方案&#xff1a;兄弟&#xff0c;有一种可能是你用测试机没有安装支付宝

分布在内侧内嗅皮层(MEC)的带状细胞对NLP中的深层语义分析的积极影响和启示

带状细胞&#xff08;Band Cells&#xff09;作为内侧内嗅皮层&#xff08;Medial Entorhinal Cortex, MEC&#xff09;层Ⅱ/Ⅲ的核心空间编码单元&#xff08;如网格细胞、头方向细胞等&#xff09;&#xff0c;其独特的神经计算机制为自然语言处理&#xff08;NLP&#xff09…

综合实验(4)

文章目录 目录 文章目录 前言 实验配置 实验总结 总结 前言 Cisco IOS Site-to-Site VPN&#xff08;虚拟专用网络&#xff09;是一种通过公共网络&#xff08;如互联网&#xff09;建立安全连接的技术&#xff0c;使不同地理位置的局域网&#xff08;LAN&#xff09;能够安…

JavaSE:开发环境的搭建(Eclipse)

一、IDE概述与核心价值 集成开发环境定义 提供编译器、调试器、项目管理工具的统一平台&#xff0c;显著提升开发效率。 Eclipse核心优势&#xff1a; 免费开源 &#xff1a;社区驱动&#xff0c;无授权费用跨平台支持 &#xff1a;Windows/Linux/macOS全兼容多语言扩展 &a…

使用LLaMA-Factory对大模型进行微调

之前了解过一些LLM从训练到落地的过程; 其中一个重要的步骤就是微调; 预训练&#xff1a;在大规模数据上学习通用语言知识。(使用海量无标注文本&#xff08;TB级&#xff09;) 微调&#xff1a;在预训练基础上&#xff0c;使用特定任务的标注数据进一步优化模型。(使用少量任务…

WxPython——一些最常见的错误现象及解决方法

一些最常见的错误现象及解决方法 有一些错误它们可能会发生在你的wxPython应用程序对象或初始的顶级窗口在创建时&#xff0c;这些错误可能是很难诊断的。下面我们列出一些最常见的错误现象及解决方法&#xff1a; 错误现象&#xff1a;程序启动时提示“unable to import modul…

SparkSQL 子查询 IN/NOT IN 对 NULL 值的处理

SparkSQL 子查询 IN/NOT IN 对 NULL 值的处理 官网&#xff1a;https://spark.apache.org/docs/4.0.0/sql-ref-functions.html https://spark.apache.org/docs/4.0.0/sql-ref-null-semantics.html#innot-in-subquery Unlike the EXISTS expression, IN expression can return…

【安卓笔记】lifecycle与viewModel

0. 环境&#xff1a; 电脑&#xff1a;Windows10 Android Studio: 2024.3.2 编程语言: Java Gradle version&#xff1a;8.11.1 Compile Sdk Version&#xff1a;35 Java 版本&#xff1a;Java11 1. 本篇文章涉及到的内容 lifecycle livedata databinding viewModel 2. …

84、逆向工程开发方法

逆向工程开发方法是一种通过分析现有产品、系统或代码来理解其设计原理、功能实现及潜在缺陷&#xff0c;并在此基础上进行改进、复制或创新的技术过程。它广泛应用于软件、硬件、机械、电子等多个领域&#xff0c;尤其在缺乏原始设计文档或需要快速掌握复杂系统时具有显著优势…

ospf单区域实验

拓扑图&#xff1a;AR1&#xff1a;[Huawei]ospf 1 router-id 1.1.1.1 [Huawei-ospf-1]area 0[Huawei-ospf-1-area-0.0.0.0]network 192.168.1.0 0.0.0.255&#xff08;1.当前网段会被ospf的进程1学习到然后通告出去&#xff1b;2.如果接口的IP地址处于这个网段中&#xff0c…

Linux命令基础完结篇

用户权限修改 chmod修改文件权限 文字设定法 u&#xff1a;所有者g&#xff1a;所属组o&#xff1a;其他人a&#xff1a;所有&#xff1a;添加权限-&#xff1a;删除权限&#xff1a;赋予权限数字设定法 r&#xff1a;4w&#xff1a;2x&#xff1a;1每一组权限&#xff1a;0~7举…

高效互联,ModbusTCP转EtherCAT网关赋能新能源电缆智能制造

在新能源汽车快速发展的背景下&#xff0c;新能源电缆作为关键组件&#xff0c;需满足耐高低温、阻燃、耐老化等严苛要求&#xff0c;这对生产线的工艺与设备提出了更高标准。为提升制造效率&#xff0c;某领先设备制造商创新采用**ModbusTCP转EtherCAT网关**技术&#xff0c;实…

Java_多线程_生产者消费者模型_互斥锁,阻塞队列

生产者消费者模型(Producer-Consumer Model)是计算机科学中一个经典的并发编程模型&#xff0c;用于解决多线程/多进程环境下的协作问题。 基本概念 生产者&#xff1a;负责生成数据或任务的实体 消费者&#xff1a;负责处理数据或执行任务的实体 缓冲区&#xff1a;生产者与消…

Vue3实现视频播放弹窗组件,支持全屏播放,音量控制,进度条自定义样式,适配浏览器小窗播放,视频大小自适配,缓冲loading,代码复制即用

效果图组件所需VUE3代码<template><div class"video-dialog" :class"fullScreen && video-dialog-full-screen"><el-dialogv-model"props.visible"draggable:show-close"false"title""centeralign-c…

LLM层归一化:γβ与均值方差的协同奥秘

LLM层归一化参数均值和方差;缩放和平移参数是什么 层归一化(Layer Normalization,LN)是深度学习中用于稳定神经网络训练的一种归一化技术 均值和方差参数用于对输入数据进行标准化处理,即将输入数据转换为均值为0、方差为1的标准正态分布 缩放因子γ\gammaγ:标准化后…

智慧场景:定制开发开源AI智能名片S2B2C商城小程序赋能零售新体验

摘要&#xff1a;智慧场景作为零售行业创新发展的关键载体&#xff0c;正深刻改变着消费者的生活方式。本文聚焦智慧零售模式下智慧场景的构建&#xff0c;以定制开发开源AI智能名片S2B2C商城小程序为切入点&#xff0c;深入探讨其在零售企业选址布局、商业模式创新、经营理念转…

QML WorkerScript

WorkerScript是QML中实现多线程编程的关键组件&#xff0c;它允许开发者将耗时操作移至后台线程执行&#xff0c;避免阻塞主UI线程&#xff0c;从而提升应用响应速度和用户体验。本文将全面介绍WorkerScript的核心机制、使用方法和最佳实践。WorkerScript核心机制WorkerScript通…

锐浪报表 Grid++Report 表头表尾的隐藏

设计锐浪表格的模板时&#xff0c;可以通过设计多个表头、表尾&#xff0c;表头、表尾中放入打印控件&#xff0c;可以打印相关的数据。在真实打印时&#xff0c;可以通过打印时让表头、表尾隐藏或显示&#xff0c;实现用户的表格样式。一、表头的指定1、 表头可以多个&#xf…

低速信号设计之 QSPI 篇

一、引言​ 在服务器技术不断演进的当下,对高效、稳定的数据存储和传输需求日益增长。QSPI(Quad Serial Peripheral Interface)总线作为一种高速、串行的外围设备接口,在服务器领域中发挥着关键作用。它为服务器中的各类存储设备及部分外围芯片与主处理器之间提供了快速可…