进程池设计

进程池设计

c++d281926eda>进程池设计

代码目的头文件代码语言:c++复制

#include#include#include#include#include#include#include#include

对子进程操作建立子进程对象并把子进程对象放进数组里代码语言:c++复制

//创建子进程对象class  SubEp//endpoint---子进程对象{public:SubEp(pid_t subid,int writefd)//第一个参数是子进程的pid,第二个参数是该子进程读端对于父进程的写端fd:_subid(subid),_writefd(writefd){   char namebuffer[1024];   //第一个参数是表示第几号子进程,第二个参数是子进程的pid,第三个参数是该子进程读端对于的父进程的写端   snprintf(namebuffer,sizeof namebuffer,"process: %d [pid(%d) - fd(%d)]",num++,_subid,_writefd);   _name=namebuffer;}public:static int num;string _name;pid_t _subid;int _writefd;//该子进程与父进程匿名管道对于的父进程的写端fd};int SubEp::num=0;

子进程对象需要传递两个参数来初始化成员变量_subid和 _writefd。一是子进程的pid二是该子进程读端对应父进程写端的文件描述符fd成员变量num表示是第几个创建出来的子进程,第一个创建出来的子进程为0,使用后++后续子进程的num依次是1,2等等。因此num不能由于出了SubEp对象作用域后被销毁,所以定义为static,变量num生命周期取决于SubEp类的生命周期成员变量 _name用namebuffer初始化,用来标识该子进程的其他成员变量建立子进程需要执行的任务表代码语言:c++复制

//创建父进程给子进程派发的任务列表typedef void(*func_t)();//函数指针类型,函数返回值为voidvoid downloadTask()//模拟下载任务{    cout<<getpid()<<": 下载任务n"<<endl;    sleep(1);}void fflushTask()//模拟刷新任务{    cout<<getpid()<<": 刷新任务n"<<endl;    sleep(1);}void subscribeTask()//模拟订阅任务{    cout<<getpid()<<": 订阅任务n"<<endl;    sleep(1);}//把上面的三种任务load到列表中即让存放函数指针的vector的各个指针能够指向上面的函数,为了后面方便调用void loadTaskFunc(vector*out){    assert(out);//vector创建成功    out->push_back(downloadTask);    out->push_back(fflushTask);    out->push_back(subscribeTask);}

子进程需要执行的任务都是函数对象,建立一个对象是函数指针的数组out,通过loadTaskFunc函数把任务函数尾插到数组out里,然后通过输出型参数返回。创建子进程和父进程通信的管道,并且让子进程阻塞读取代码语言:c++复制

void CreateSubProcesses( vector*subs,vector& funcMap){    vector deleteFd;//创建子进程并且创建好父进程与各个子进程通信的管道int fds[2];for(size_t i=0;i<PROCESS_NUM;i++)//创建子进程{        int n=pipe(fds);//建立父子间进程的匿名管道--建立成功返回0,建立失败返回-1        assert(n==0);//判断管道是否建立成功        (void)n;        pid_t id=fork();//创建子进程        if(id==0)        {             for(size_t i=0;i=0 && taskcodepush_back(sub);        deleteFd.push_back(fds[1]);//记录当前的写端供下个子进程用}

在函数CreateSubProcesses内,先建立父进程相连的匿名管道,然后创建子进程,子进程也拷贝了一份父进程的文件描述符表,能通过文件描述符连接到匿名管道,因此父子进程通信的管道建立完成。在父进程语句中,需要注意的是,通过传参数子进程的pid和此时子进程读端对于的父进程的写端fd给SubEP类构建子进程对象,并且将对象放进数组subs里。在子进程的语句中,通过receiveTask函数获取任务码代码语言:c++复制

int receiveTask(int readfd){    int retcode=0;//返回任务码    ssize_t s= read(readfd,&retcode,sizeof(retcode));//从读端读出来的任务码放到retcode里    cout<<"process has read the TaskCode: "<<retcode<<endl;    if(s==sizeof(int)) return retcode;    else if(s<=0)return -1;    else return 0;}

让子进程在receiveTask函数中阻塞读取管道里的数据。前提已知父进程往匿名管道写入整数数据,数据范围为0,任务个数-1即任务数组对应的下标范围,子进程把读取到的数据存到变量retcode里,然后判断retcode是否是整数数据大小,如果是就返回数据给上层CreateSubProcesses函数,如果不是就返回-1。当变量taskcode接收到receiveTask函数返回的任务码时,如果任务码符合范围0,任务个数-1即父子进程按照我们的意愿通信正常,然后子进程拿着任务码调用funcMap数组执行任务;但如果接收的返回值是-1,则是父子进程间通信不正常,直接退出判断语句。

这里提到的子进程操作主要是子进程阻塞读取父进程写入的数据,还有子进程拿到数据执行任务。

对父进程操作代码语言:c++复制

void loadBalanceContrl(const vector& subs,const vector &funcMap,int comcode){    int processnum=subs.size();//子进程的个数    int tasknum=funcMap.size();//任务的个数    bool numoftime=(comcode==0?true:false);//若命令码是0则一直运行,若命令码为正数x,则允许x次后退出    while(true)    {   //rand()为伪随机数   //1.找到哪一个子进程   int subIndex=rand()%processnum;    //2.找到哪一个执行哪一个任务   int taskIndex=rand()%tasknum;    //3.任务发送给选择的进程     sendTask(subs[subIndex],taskIndex);//第一个参数传第几个子进程,第二个参数传第几个任务     sleep(1);  if(!numoftime)  {    comcode--;    if(comcode==0)    break;  }    }    //走到这里则是父进程给子进程通信完了,需要逐个关闭子进程读端对于的写端--倒退关解决bug    for(size_t i=0;i<subs.size();i++)    {      close(subs[i]._writefd);      cout<<"close process: [ "<<i<<" ]'s writeeop"<<endl;    }}

loadBalanceContrl函数需要main函数传入子进程数组subs,任务数组funcMap和命令码comcode。comcode用来指定父进程发送多少次数据给子进程即子进程需要执行多少次任务numoftime用来鉴别父进程需要写入多少次数据,当comcode为0时则numoftime为真,则父进程死循环往匿名管道里写数据;若命令码为正数x为非0,则numoftime为假,则父进程往匿名管道里写x次数据。通过sendTask函数让父进程选择指定的子进程,写入指定的任务码到匿名管道中代码语言:c++复制

void sendTask(const SubEp& process, int tasknum){    cout<<"send Task num: "<<tasknum<<" to the process: "<<process._name<<endl;//打印日志:任务几发送给几号子进程    ssize_t n=write(process._writefd,&tasknum,sizeof(tasknum));//该子进程读端对于的写端往管道里写入任务几-4个字节的数据    assert(n==sizeof(int));//判断写入的数据是否是4个字节    (void)n;}

父子间进程通信完之后,按照子进程创建时间从先往后依次关闭子进程读端对应的父进程的写端。回收子进程代码语言:c++复制

void waitProcess(const vector& processes){    for(size_t i=0;i<processes.size();i++)    {        waitpid(processes[i]._subid,nullptr,0);        cout<<"wait success for process: "<<processes[i]._subid<<endl;    }}

按照子进程创建时间从先往后依次回收子进程。整体代码代码语言:c++复制

#include#include#include#include#include#include#include#includeusing namespace std;#define PROCESS_NUM 3#define MakeSeed() srand((unsigned long)time(nullptr)^getpid()^rand()%1234)//建立伪随机数种子//创建父进程给子进程派发的任务列表typedef void(*func_t)();//函数指针类型,函数返回值为voidvoid downloadTask()//模拟下载任务{    cout<<getpid()<<": 下载任务n"<<endl;    sleep(1);}void fflushTask()//模拟刷新任务{    cout<<getpid()<<": 刷新任务n"<<endl;    sleep(1);}void subscribeTask()//模拟订阅任务{    cout<<getpid()<<": 订阅任务n"<<endl;    sleep(1);}//把上面的三种任务load到列表中即让存放函数指针的vector的各个指针能够指向上面的函数,为了后面方便调用void loadTaskFunc(vector*out){    assert(out);//vector创建成功    out->push_back(downloadTask);    out->push_back(fflushTask);    out->push_back(subscribeTask);}//创建子进程对象class  SubEp//endpoint---子进程对象{public:SubEp(pid_t subid,int writefd)//第一个参数是子进程的pid,第二个参数是该子进程读端对于父进程的写端fd:_subid(subid),_writefd(writefd){   char namebuffer[1024];   //第一个参数是表示第几号子进程,第二个参数是子进程的pid,第三个参数是该子进程读端对于的父进程的写端   snprintf(namebuffer,sizeof namebuffer,"process: %d [pid(%d) - fd(%d)]",num++,_subid,_writefd);   _name=namebuffer;}public:static int num;string _name;pid_t _subid;int _writefd;//该子进程与父进程匿名管道对于的父进程的写端fd};int SubEp::num=0;int receiveTask(int readfd){    int retcode=0;//返回任务码    ssize_t s= read(readfd,&retcode,sizeof(retcode));//从读端读出来的任务码放到retcode里    cout<<"process has read the TaskCode: "<<retcode<<endl;    if(s==sizeof(int)) return retcode;    else if(s<=0)return -1;    else return 0;}void CreateSubProcesses( vector*subs,vector& funcMap){    vector deleteFd;//创建子进程并且创建好父进程与各个子进程通信的管道int fds[2];for(size_t i=0;i<PROCESS_NUM;i++)//创建子进程{        int n=pipe(fds);//建立父子间进程的匿名管道--建立成功返回0,建立失败返回-1        assert(n==0);//判断管道是否建立成功        (void)n;        pid_t id=fork();//创建子进程        if(id==0)//子进程进入判断语句        {            for(size_t i=0;i=0 && taskcodepush_back(sub);       deleteFd.push_back(fds[1]);//记录当前的写端供下个子进程用}}void sendTask(const SubEp& process, int tasknum){    cout<<"send Task num: "<<tasknum<<" to the process: "<<process._name<<endl;//打印日志:任务几发送给几号子进程    ssize_t n=write(process._writefd,&tasknum,sizeof(tasknum));//该子进程读端对于的写端往管道里写入任务几-4个字节的数据    assert(n==sizeof(int));//判断写入的数据是否是4个字节    (void)n;}void loadBalanceContrl(const vector& subs,const vector &funcMap,int comcode){    int processnum=subs.size();//子进程的个数    int tasknum=funcMap.size();//任务的个数    bool numoftime=(comcode==0?true:false);//若命令码是0则一直运行,若命令码为正数x,则允许x次后退出    while(true)    {        //rand()为伪随机数   //1.找到哪一个子进程   int subIndex=rand()%processnum;    //2.找到哪一个执行哪一个任务   int taskIndex=rand()%tasknum;    //3.任务发送给选择的进程     sendTask(subs[subIndex],taskIndex);//第一个参数传第几个子进程,第二个参数传第几个任务     sleep(1);  if(!numoftime)  {    comcode--;    if(comcode==0)    break;  }    }    //走到这里则是父进程给子进程通信完了,需要逐个关闭子进程读端对于的父进程写端    for(size_t i=0;i<subs.size();i++)    {      close(subs[i]._writefd);      cout<<"close process: [ "<<i<<" ]'s writeeop"<<endl;    //    waitpid(subs[i]._subid,nullptr,0);    //     cout<<"wait success for process: "<<subs[i]._subid<<endl;    }}void waitProcess(const vector& processes){    for(size_t i=0;i<processes.size();i++)    {        waitpid(processes[i]._subid,nullptr,0);        cout<<"wait success for process: "<<processes[i]._subid<<endl;    }}int main(){    MakeSeed();//建立伪随机数种子vector subs;//创建子进程对象并将子进程对象放进数组里vector funcMap;//建立一个任务表:父进程写入管道,子进程在管道读取,读取到的数据引导子进程去完成一些任务loadTaskFunc(&funcMap);//1.创建子进程并且创建好父进程与各个子进程通信的管道,并且让子进程阻塞等待父进程写入CreateSubProcesses(&subs,funcMap);//2.对父进程操作//父进程给子进程发送命令码,为0则一直运行,为正数x则运行x次后退出int Runcount=0;cout<>Runcount;cout<<endl;//这个函数负责让父进程给子进程发送命令码,让子进程去执行任务,要求子进程做到负载均衡     loadBalanceContrl(subs,funcMap,Runcount);//第一个参数是子进程列表,第二个参数任务列表,第三个参数是父进程给子进程发送的命令码 //3.回收子进程waitProcess(subs);    return 0;}

子进程具有读端未关闭的bug

进程池设计image-20230522164129612
进程池设计image-20230522164147020
进程池设计image-20230522164456853

通过上面的图例可以看到,2号子进程有一个写端与1号子进程的读端通信着。

得出结论:当父进程创建多个子进程,并且父进程作为写端而多个子进程作为读端从而进行进程间通信时,需要单独把子进程的所有写端都关闭。

这里提供两种方法关闭子进程的所有写端

方案一:在父进程创建子进程前构建一个vector对象,父进程创建子进程后,把父进程的写端放进vector里。等到父进程创建完下一个子进程时,vector里的写端即是当前子进程读端对应的上一个子进程的写端(有可能不只是一个写端),再把vector里的所有写端关闭即可。

进程池设计image-20230522202611512
进程池设计image-20230522203254968

这次实现就是用的这个方案,其实不用也可以,因为当父进程往匿名管道里写完数据时,先把父进程对应各个子进程的写端全部关闭,然后再将全部子进程进行回收,这种顺序不会出现bug;但如果是按照创建子进程时间从旧往新关掉一个父进程的写端,然后立刻等待回收一个相应的子进程的话,会导致出现该子进程读端还有其他子进程的写端通信着,该子进程读端没有读到0导致子进程没有正常退出,那么父进程也就回收不到子进程。方案二:在父进程关闭写端,需要所有子进程关闭读端时,依次按照创建的时间从新往旧(从后往前)关闭父进程的写端。由于最后创建的子进程的读端只对应父进程的写端,那么父进程关闭写端时,最后一个子进程的读端读到0正常关闭读端,那么该子进程的文件描述符表也会被关闭,进而该子进程正常退出,从而该子进程连接着前一个子进程的写端也会被关闭;那么轮到下一个子进程时,该子进程的读端也只会对应父进程的写端,父进程关闭写端,子进程读端读到0正常关闭读端,子进程正常退出。

以上就是进程池设计的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/72356.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月13日 15:48:49
下一篇 2025年11月13日 16:09:10

相关推荐

  • Linux中如何安装Nginx服务_Linux安装Nginx服务的完整指南

    首先更新系统软件包,然后通过对应包管理器安装Nginx,启动并启用服务,开放防火墙端口,最后验证欢迎页显示以确认安装成功。 在Linux系统中安装Nginx服务是搭建Web服务器的第一步。Nginx以高性能、低资源消耗和良好的并发处理能力著称,广泛用于静态内容服务、反向代理和负载均衡。以下是在主流L…

    2025年12月6日 运维
    000
  • Linux journalctl与systemctl status结合分析

    先看 systemctl status 确认服务状态,再用 journalctl 查看详细日志。例如 nginx 启动失败时,systemctl status 显示 Active: failed,journalctl -u nginx 发现端口 80 被占用,结合两者可快速定位问题根源。 在 Lin…

    2025年12月6日 运维
    100
  • Linux如何防止缓冲区溢出_Linux防止缓冲区溢出的安全措施

    缓冲区溢出可通过栈保护、ASLR、NX bit、安全编译选项和良好编码实践来防范。1. 使用-fstack-protector-strong插入canary检测栈破坏;2. 启用ASLR(kernel.randomize_va_space=2)随机化内存布局;3. 利用NX bit标记不可执行内存页…

    2025年12月6日 运维
    000
  • Linux如何优化系统性能_Linux系统性能优化的实用方法

    优化Linux性能需先监控资源使用,通过top、vmstat等命令分析负载,再调整内核参数如TCP优化与内存交换,结合关闭无用服务、选用合适文件系统与I/O调度器,持续按需调优以提升系统效率。 Linux系统性能优化的核心在于合理配置资源、监控系统状态并及时调整瓶颈环节。通过一系列实用手段,可以显著…

    2025年12月6日 运维
    000
  • Pboot插件数据库连接的配置教程_Pboot插件数据库备份的自动化脚本

    首先配置PbootCMS数据库连接参数,确保插件正常访问;接着创建auto_backup.php脚本实现备份功能;然后通过Windows任务计划程序或Linux Cron定时执行该脚本,完成自动化备份流程。 如果您正在开发或维护一个基于PbootCMS的网站,并希望实现插件对数据库的连接配置以及自动…

    2025年12月6日 软件教程
    000
  • Linux命令行中wc命令的实用技巧

    wc命令可统计文件的行数、单词数、字符数和字节数,常用-l统计行数,如wc -l /etc/passwd查看用户数量;结合grep可分析日志,如grep “error” logfile.txt | wc -l统计错误行数;-w统计单词数,-m统计字符数(含空格换行),-c统计…

    2025年12月6日 运维
    000
  • Linux命令行中fc命令的使用方法

    fc 是 Linux 中用于管理命令历史的工具,可查看、编辑并重新执行历史命令。输入 fc 直接编辑最近一条命令,默认调用 $EDITOR 打开编辑器修改后自动执行;通过 fc 100 110 或 fc -5 -1 可批量编辑指定范围的历史命令,保存后按序重跑;使用 fc -l 列出命令历史,支持起…

    2025年12月6日 运维
    000
  • VSCode终端美化:功率线字体配置

    首先需安装Powerline字体如Nerd Fonts,再在VSCode设置中将terminal.integrated.fontFamily设为’FiraCode Nerd Font’等支持字体,最后配合oh-my-zsh的powerlevel10k等Shell主题启用完整美…

    2025年12月6日 开发工具
    000
  • Linux命令行中locate命令的快速查找方法

    locate命令通过查询数据库快速查找文件,使用-i可忽略大小写,-n限制结果数量,-c统计匹配项,-r支持正则表达式精确匹配,刚创建的文件需运行sudo updatedb更新数据库才能查到。 在Linux命令行中,locate 命令是快速查找文件和目录路径的高效工具。它不直接扫描整个文件系统,而是…

    2025年12月6日 运维
    000
  • Linux文件系统rsync命令详解

    rsync通过增量同步高效复制文件,支持本地及远程同步,常用选项包括-a、-v、-z和–delete,结合SSH可安全传输数据,配合cron可实现定时备份。 rsync 是 Linux 系统中一个非常强大且常用的文件同步工具,能够高效地在本地或远程系统之间复制和同步文件与目录。它以“增量…

    2025年12月6日 运维
    000
  • Linux systemctl list-dependencies命令详解

    systemctl list-dependencies 用于查看 systemd 单元的依赖关系,帮助排查启动问题和优化启动流程。1. 基本语法为 systemctl list-dependencies [选项] [单元名称],默认显示 default.target 的依赖。2. 常见单元类型包括 …

    2025年12月6日 运维
    000
  • 如何在mysql中安装mysql插件扩展

    安装MySQL插件需先确认插件文件位于plugin_dir目录,使用INSTALL PLUGIN命令加载,如INSTALL PLUGIN keyring_file SONAME ‘keyring_file.so’,并确保用户有SUPER权限,最后通过SHOW PLUGINS验…

    2025年12月6日 数据库
    000
  • 如何在mysql中定期清理过期备份文件

    通过Shell脚本结合cron定时任务实现MySQL过期备份文件自动清理,首先统一备份命名格式(如backup_20250405.sql)并存放在指定目录(/data/backup/mysql),然后编写脚本使用find命令删除7天前的.sql文件,配置每日凌晨2点执行的cron任务,并加入日志记录…

    2025年12月6日 数据库
    000
  • Linux文件系统中的ext4与xfs对比

    ext4适合通用场景,稳定性强,兼容性好,适用于桌面和中小型服务器;XFS擅长大规模高并发I/O,扩展性强,适用于大文件与高性能需求环境。 在Linux系统中,ext4和XFS是两种广泛使用的文件系统,各自适用于不同的使用场景。选择哪一个取决于性能需求、数据规模以及工作负载类型。 设计目标与适用场景…

    2025年12月6日 运维
    000
  • 如何在Linux中处理磁盘满的问题?

    先使用df -h和du命令定位占用空间的目录或文件,再清理日志、缓存等可删除内容,并通过定期任务和监控预防问题复发。 当Linux系统提示磁盘空间不足时,关键是要快速定位问题源头并释放空间。以下是实用的排查和处理步骤。 检查磁盘使用情况 使用df命令查看各分区的使用情况: df -h:以易读方式显示…

    2025年12月6日 运维
    000
  • Linux命令行中free命令的使用方法

    free命令用于查看Linux内存使用情况,包括总内存、已用、空闲、共享、缓存及可用内存;使用-h可读格式显示,-s周期刷新,-c限制次数,-t显示总计,帮助快速评估系统内存状态。 free命令用于显示Linux系统中内存和交换空间的使用情况,包括物理内存、已用内存、空闲内存以及缓存和缓冲区的占用情…

    2025年12月6日 运维
    000
  • Linux命令行中tail -f命令的详细应用

    tail -f 用于实时监控文件新增内容,常用于日志查看;支持 -F 处理轮转、-n 指定行数、结合 grep 过滤,可监控多文件,需注意权限与资源释放。 tail -f 是 Linux 中一个非常实用的命令,主要用于实时查看文件的新增内容,尤其在监控日志文件时极为常见。它会持续输出文件末尾新增的数…

    2025年12月6日 运维
    000
  • 如何在Linux中快速复制大文件?

    使用cp、rsync或dd命令优化大文件复制,结合reflink、全量传输、大块大小设置及系统配置调整,可显著提升复制速度与资源利用率。 复制大文件时,速度和系统资源占用是关键。Linux 提供多种方式来高效完成大文件复制任务,选择合适的方法能显著提升效率。 使用 cp 命令并优化参数 cp 是最常…

    2025年12月6日 运维
    000
  • VSCode调试:快速定位与修复问题

    掌握VSCode调试技巧可提升开发效率。首先设置断点并配置launch.json文件,通过“运行和调试”面板启动调试;程序暂停时利用变量窗格查看数据状态,结合调用栈追溯函数执行路径;使用调试控制台动态执行代码、验证逻辑;针对高频调用场景,可设置条件断点(如i===100)或日志断点输出信息而不中断执…

    2025年12月6日 开发工具
    000
  • LINUX怎么查看系统所有用户组_Linux系统所有用户组查看方法

    首先使用getent group命令获取系统中所有用户组的完整列表,该命令从/etc/group文件和网络信息源读取数据,结果全面;接着可通过cat /etc/group直接查看本地用户组配置文件内容,适合快速检查本地组信息;最后利用bash内置命令compgen -g列出所有用户组名称,便于脚本处…

    2025年12月6日 系统教程
    000

发表回复

登录后才能评论
关注微信