Deprecated: imwpcache\f884414bce24ee67f\f73723ec7b1919fa5::__construct(): Implicitly marking parameter $YECBGYFECGEAFWHA as nullable is deprecated, the explicit nullable type must be used instead in /www/wwwroot/www.chuangxiangniao.com/wp-content/plugins/imwpcache-dist/build/f884414bce24ee67ff73723ec7b1919fa5.php on line 2

Deprecated: imwpcache\f884414bce24ee67f\f73723ec7b1919fa5::__construct(): Implicitly marking parameter $BBWFDDBHHYHDXXAB as nullable is deprecated, the explicit nullable type must be used instead in /www/wwwroot/www.chuangxiangniao.com/wp-content/plugins/imwpcache-dist/build/f884414bce24ee67ff73723ec7b1919fa5.php on line 2
Go语言并发模式:优化独立工作协程的并行执行_创想鸟

Go语言并发模式:优化独立工作协程的并行执行

Go语言并发模式:优化独立工作协程的并行执行

本教程探讨go语言中如何优化独立工作协程的并行执行。针对传统顺序执行导致并发效率低下的问题,文章提出了一种通过巧妙重排通道操作的解决方案。该模式允许多个独立工作协程同时启动并并行处理数据,并通过通道接收操作实现同步,确保所有工作完成后再进行下一步处理,从而在保持固定协程数量的同时,显著提升系统吞吐量。

在Go语言中,利用协程(goroutine)和通道(channel)实现并发是其核心优势之一。然而,不恰当的通道操作顺序可能导致即使是独立的任务也无法真正并行执行,从而限制了程序的并发能力。本教程将深入探讨如何通过优化通道操作顺序,使得多个独立的工作协程能够高效并行处理数据,同时满足保持固定协程数量的约束。

挑战:独立工作协程的顺序执行

考虑一个常见的场景:一个主协调协程(例如account)需要将接收到的数据分发给多个独立的子工作协程(例如workerA和workerB)进行处理。要求是:

workerA和workerB各自运行在一个独立的协程中,且这些协程数量固定,不随数据项的增加而动态创建。workerA和workerB对数据的处理是完全独立的,它们之间没有数据依赖,因此可以并行执行。只有当所有相关的子工作协程都完成对当前数据项的处理后,主协调协程才能将该数据项传递给下一个阶段。

初始的实现可能如下所示,其中主协调协程account在处理每个数据项时,会先将数据发送给workerA并等待其完成,然后再发送给workerB并等待其完成。这种串行等待的方式,即使workerA和workerB是独立的,也无法实现真正的并行。

package mainimport "fmt"func workerA(work_in_chan <-chan int, work_out_chan chan<- int) {    for d := range work_in_chan {        fmt.Println("A ", d)        // 模拟工作        work_out_chan <- d    }}func workerB(work_in_chan <-chan int, work_out_chan chan<- int) {    for d := range work_in_chan {        fmt.Println("B ", d)        // 模拟工作        work_out_chan <- d    }}func account(account_chan <-chan int, final_chan chan<- int) {    wa_in := make(chan int)    wa_out := make(chan int)    wb_in := make(chan int)    wb_out := make(chan int)    go workerA(wa_in, wa_out)    go workerB(wb_in, wb_out)    for d := range account_chan {        // 初始实现:串行处理,无法并行        wa_in <- d        <-wa_out // 阻塞,等待workerA完成        wb_in <- d        <-wb_out // 阻塞,等待workerB完成        final_chan <- d    }}func main() {    account_chan := make(chan int, 100)    final_chan := make(chan int, 100)    go account(account_chan, final_chan)    account_chan <- 1    account_chan <- 2    account_chan <- 3    close(account_chan) // 关闭输入通道,以便account协程最终退出    // 从final_chan接收结果    for i := 0; i < 3; i++ {        fmt.Println("Final:", <-final_chan)    }    close(final_chan) // 关闭输出通道}

在上述代码中,account协程在处理每个数据项d时,首先向wa_in发送数据,然后立即阻塞等待wa_out的返回。只有workerA处理完毕并发送到wa_out后,account协程才能继续向wb_in发送数据,并再次阻塞等待wb_out的返回。这种模式导致workerA和workerB无法同时运行,极大地限制了并发性。

立即学习“go语言免费学习笔记(深入)”;

解决方案:重排通道操作实现并行

要解决上述问题,关键在于改变主协调协程中通道的发送和接收顺序。既然workerA和workerB是独立的,我们可以先将数据同时发送给它们,让它们并行开始工作,然后统一等待它们全部完成。

优化的实现如下:

package mainimport "fmt"func workerA(work_in_chan <-chan int, work_out_chan chan<- int) {    for d := range work_in_chan {        fmt.Println("A processing:", d)        // 模拟工作,可能耗时        work_out_chan <- d // 完成后发送信号    }    close(work_out_chan) // 当输入通道关闭时,关闭输出通道}func workerB(work_in_chan <-chan int, work_out_chan chan<- int) {    for d := range work_in_chan {        fmt.Println("B processing:", d)        // 模拟工作,可能耗时        work_out_chan <- d // 完成后发送信号    }    close(work_out_chan) // 当输入通道关闭时,关闭输出通道}func account(account_chan <-chan int, final_chan chan<- int) {    // 创建用于workerA和workerB的输入输出通道    // 注意:这里使用无缓冲通道,确保worker在准备好接收前不会阻塞发送    wa_in := make(chan int)    wa_out := make(chan int)    wb_in := make(chan int)    wb_out := make(chan int)    // 启动worker协程    go workerA(wa_in, wa_out)    go workerB(wb_in, wb_out)    // 遍历输入数据    for d := range account_chan {        // 1. 同时将数据发送给所有工作协程        // 假设worker协程已准备好接收,此操作是非阻塞的(对于无缓冲通道,worker必须已在接收端等待)        // 或如果通道有缓冲,则只要缓冲未满,发送就是非阻塞的        wa_in <- d        wb_in <- d        // 2. 阻塞等待所有工作协程完成        // 接收操作会阻塞,直到对应的worker完成其工作并发送信号        <-wa_out        <-wb_out        // 3. 所有工作完成后,将数据发送到最终通道        final_chan <- d    }    // 当account_chan关闭且所有数据处理完毕后,关闭worker的输入通道    // 这样worker协程才能从for range循环中退出    close(wa_in)    close(wb_in)    // 等待worker协程完成所有剩余工作并关闭其输出通道    // 确保在关闭final_chan之前所有数据都已处理    for range wa_out {} // 消费完所有wa_out中可能剩余的信号    for range wb_out {} // 消费完所有wb_out中可能剩余的信号    close(final_chan) // 所有工作完成后关闭最终输出通道}func main() {    account_chan := make(chan int, 100) // 带缓冲的输入通道    final_chan := make(chan int, 100)   // 带缓冲的输出通道    go account(account_chan, final_chan)    // 发送数据    account_chan <- 1    account_chan <- 2    account_chan <- 3    close(account_chan) // 发送完毕,关闭输入通道    // 从final_chan接收结果    for res := range final_chan {        fmt.Println("Final result:", res)    }}

代码分析:

并行启动工作: wa_in 同步等待完成: 顺序不重要: 即使workerA比workerB先完成,或者反之,这种模式都能正确工作。因为account协程会同时等待两个接收操作,无论哪个先完成,它都会继续等待另一个,直到两者都完成为止。

通过这种简单的通道操作重排,我们成功地让两个独立的worker协程实现了真正的并行处理,同时满足了所有数据项必须经过所有worker处理的同步要求,并且保持了固定数量的协程。

关键概念与注意事项

并发与并行:

并发(Concurrency) 是指程序设计结构能够处理多个任务。Go语言通过协程(goroutines)提供了优秀的并发原语。并行(Parallelism) 是指多个任务在同一时间点上物理地同时执行。本教程的优化正是为了在多核处理器上实现workerA和workerB的并行执行。

通道缓冲:

在上述示例中,wa_in、wa_out、wb_in、wb_out通道默认是无缓冲的。这意味着发送操作会阻塞,直到有接收者准备好接收;接收操作会阻塞,直到有发送者发送数据。这种行为保证了严格的同步。如果将这些通道设置为带缓冲的(例如make(chan int, 1)),则发送操作在缓冲区未满时是非阻塞的。这可以减少协调协程与工作协程之间的紧密耦合,提高吞吐量,但需要注意缓冲区大小的选择,以避免死锁或资源耗尽。

sync.WaitGroup的替代方案:

在当前场景中,workerA和workerB的输出通道(wa_out, wb_out)仅用于发送完成信号,其传输的具体值并不重要。

如果工作协程的输出值确实不需要被主协调协程使用,那么使用sync.WaitGroup可能是一个更简洁、更高效的同步机制。sync.WaitGroup专门用于等待一组协程完成。

使用sync.WaitGroup的伪代码示例:

// ... (workerA和workerB不再需要work_out_chan,而是接收一个*sync.WaitGroup)func workerA(work_in_chan <-chan int, wg *sync.WaitGroup) {    defer wg.Done() // 在函数退出时通知WaitGroup    for d := range work_in_chan {        // ... 处理数据    }}func account(account_chan <-chan int, final_chan chan<- int) {    // ...    var wg sync.WaitGroup    // ...    for d := range account_chan {        wg.Add(2) // 增加计数,表示有两个worker需要完成        wa_in <- d        wb_in <- d        wg.Wait() // 阻塞等待所有worker完成        final_chan <- d    }    // ...}

sync.WaitGroup的优势在于它更明确地表达了“等待一组任务完成”的意图,并且避免了创建不必要的通道。

优雅关闭:

在main函数中,通过close(account_chan)来通知account协程不再有新的数据。account协程在for range account_chan循环结束后,需要close(wa_in)和close(wb_in)来通知workerA和workerB不再有新的输入。workerA和workerB在接收通道关闭后,也会退出其for range循环,并close其输出通道。account协程在关闭其输入通道后,需要确保所有worker协程都已完成并关闭其输出通道后,才能安全地关闭final_chan。通过for range wa_out {}和for range wb_out {}来消费完所有可能的剩余信号,确保worker协程完全退出。这确保了整个数据流的完整性和程序的优雅终止。

总结

通过对Go语言中通道操作顺序的细致调整,我们能够有效地将独立的任务从串行执行转变为并行执行,从而充分利用多核处理器的能力,提升程序的整体吞吐量。这种模式的核心思想是:先同时启动所有独立的工作任务(通过非阻塞发送),然后统一等待所有任务完成(通过阻塞接收)。在实际开发中,根据具体需求(是否需要传递结果、同步机制的简洁性等),可以选择使用通道进行同步,或者考虑使用sync.WaitGroup等更专业的同步原语。理解并熟练运用这些并发模式,是编写高性能Go语言应用的关键。

以上就是Go语言并发模式:优化独立工作协程的并行执行的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1417442.html

赞 (0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
输出格式要求:Go语言中ToUpper与ToTitle的区别详解
上一篇 2025年12月16日 11:23:42
Go并发与Channel:深入理解调度器行为与同步机制
下一篇 2025年12月16日 11:24:07

相关推荐

  • Pictory如何快速生成AI视频?从文本到AI视频的完整教程

    Pictory通过智能算法将文字脚本转化为专业AI视频,核心在于自动分析文本、匹配视觉素材、生成语音并初步剪辑。用户登录后选择“Script to Video”,粘贴结构清晰的脚本,AI会自动分割场景并推荐素材,支持手动调整场景划分、替换素材、上传自定义图片视频以增强品牌一致性。平台提供多语言AI语…

    2026年9月22日
    000
  • win11开机自检(POST)时间过长怎么办_win11开机POST自检时间过长解决方案

    1、禁用快速启动可重置POST流程,避免固件初始化异常;2、调整BIOS启动顺序,优先设置系统硬盘并禁用无效设备以减少检测时间;3、断开非必要外设并更新BIOS,排除外设干扰与版本兼容问题,有效缩短Windows 11开机自检耗时。 如果您在启动Windows 11电脑时发现开机自检(POST)阶段…

    2026年9月22日
    100
  • Flyway多数据库与CI/CD测试集成策略

    本文深入探讨了在CI/CD流程中,如何高效地配置Flyway以管理多数据库环境下的迁移,尤其关注集成测试场景。我们将比较使用真实数据库服务、Testcontainers以及Flyway自身多数据库配置的优劣,并提供关于分离生产与测试环境迁移脚本的实用策略,旨在确保开发、测试与生产环境的数据一致性与流…

    2026年9月22日
    100
  • PHP框架日志系统怎么记录错误_PHP框架日志系统配置指南

    PHP框架通过配置日志级别、通道和处理器,结合Monolog库实现错误记录。以Laravel和Symfony为例,可在配置文件中定义多通道(如文件、Slack)、设置不同级别(ERROR、CRITICAL),并通过门面或服务在代码中捕获异常并写入上下文信息。 PHP框架的日志系统记录错误,核心在于通…

    2026年9月22日
    000
  • Spring Boot自定义Kafka配置与动态Bean注册最佳实践

    本文探讨了在Spring Boot应用中通过自定义注解简化Kafka配置的挑战与解决方案。重点介绍了如何利用META-INF/spring.factories实现早期自动配置,并详细阐述了使用ImportBeanDefinitionRegistrar在应用上下文初始化早期动态注册Kafka生产者工厂…

    2026年9月22日
    100
  • iPhone 17邀请函暗藏玄机 博主:散热稳了

    8月27日消息,苹果新品发布会已确定于北京时间9月10日凌晨1点举行,有网友指出,苹果发布的宣传海报中,其logo呈现出类似热成像图的视觉效果,疑似暗示iphone 17系列将在散热方面迎来重大升级。 科技博主定焦数码分析称,发布会海报中橘红色的高温区域正逐步消散,这一视觉设计意在突出iPhone …

    2026年9月22日
    200
  • mysql安装后怎么维护 mysql日常维护操作大全

    mysql安装后怎么维护 mysql日常维护操作大全mysql安装后怎么维护 mysql日常维护操作大全mysql安装后怎么维护 mysql日常维护操作大全mysql安装后怎么维护 mysql日常维护操作大全

    开启并分析慢查询日志以优化 sql 性能;2. 定期使用逻辑或物理方式备份数据并异地存储;3. 监控连接数和服务器资源,防止资源耗尽;4. 定期执行 analyze、optimize 和 check 表操作以维护表健康;5. 合理管理日志配置与清理策略。mysql 安装后的日常维护主要包括慢查询监控…

    2026年9月22日 • 用户投稿
    100
  • 深度解析蝴蝶号如何实现AI实景24小时无人直播

    深度解析蝴蝶号如何实现AI实景24小时无人直播深度解析蝴蝶号如何实现AI实景24小时无人直播深度解析蝴蝶号如何实现AI实景24小时无人直播深度解析蝴蝶号如何实现AI实景24小时无人直播

    蝴蝶号能实现ai实景24小时无人直播,主要靠智能中控系统+实景画面采集+自动化互动机制。一、ai中控系统作为“大脑”,自动控制画面切换、语音播报、商品推荐和评论区互动,具备一定判断能力,确保稳定性与持续性。二、实景画面采集作为“眼睛”,通过高清摄像头和云台控制,在门店、仓库等场景采集实时画面,保障真…

    2026年9月22日 • 用户投稿
    200
  • 在Java中如何开发简易问答社区

    答案是Java结合Spring Boot可快速构建问答社区,通过设计questions、answers、users三张表实现数据存储,使用JPA进行持久化,前端用HTML+JS调用后端API完成用户提问、回答、查看与互动功能。 开发一个简易问答社区,核心是实现用户提问、回答、查看问题和互动功能。Ja…

    2026年9月22日
    100
  • PHP 数组元素按日期条件过滤与删除:避免常见陷阱

    本教程详细介绍了如何在 PHP 中根据日期条件动态删除数组(或对象数组)中的元素。文章将重点讲解如何正确进行日期比较,特别是当数据源为 JSON 格式时,以及 unset 函数在遍历过程中移除元素时的正确用法,帮助开发者避免常见的字符串日期比较和对象属性访问错误。 简介 在数据处理中,根据特定条件过…

    2026年9月22日
    100
  • HitPawVideoEditor如何制作AI视频?教你快速创建AI内容的步骤

    答案是HitPaw Video Editor通过AI文本转视频、AI图片生成、智能抠图、自动字幕等功能,显著提升视频创作效率。它以“AI创作+人工精修”模式降低制作门槛,帮助用户快速生成初稿、丰富视觉素材、简化复杂操作,并支持快速迭代,但需避免过度依赖AI,仍需人工打磨以确保情感表达与叙事质量。 ☞…

    2026年9月22日
    000
  • linux系统下codeblocks控制台打印中文乱码[通俗易懂]

    linux系统下codeblocks控制台打印中文乱码[通俗易懂]linux系统下codeblocks控制台打印中文乱码[通俗易懂]linux系统下codeblocks控制台打印中文乱码[通俗易懂]linux系统下codeblocks控制台打印中文乱码[通俗易懂]

    大家好,很高兴再次和大家见面,我是你们的朋友全栈君。 在Linux系统下使用CodeBlocks时,如果在控制台中打印中文可能会遇到乱码问题。以下是解决这一问题的详细步骤: 首先,我们来看一下在Linux系统下安装CodeBlocks后,运行以下代码时出现的问题: #include #include…

    2026年9月22日 • 用户投稿
    600
  • 如何用Blender打造AI生成3D视频?免费软件制作AI视频的步骤

    如何用Blender打造AI生成3D视频?免费软件制作AI视频的步骤如何用Blender打造AI生成3D视频?免费软件制作AI视频的步骤如何用Blender打造AI生成3D视频?免费软件制作AI视频的步骤如何用Blender打造AI生成3D视频?免费软件制作AI视频的步骤

    答案是可行,通过Blender与免费AI工具结合,构建以AI辅助概念设计、纹理生成和动作参考,Blender主导建模、动画与渲染的混合工作流,实现高效3D视频创作。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 用Blender制作AI生成…

    2026年9月22日 • 用户投稿
    200
  • VSCode搭建FPGA与ROS通信环境(机器人控制,硬件加速指南)

    VSCode可高效集成FPGA与ROS开发,通过远程SSH连接实现跨环境代码编辑、任务自动化与调试,结合FPGA通信接口设计与ROS节点开发,统一硬件与软件工作流,提升开发效率。 将VSCode作为FPGA与ROS通信的集成开发环境是完全可行的,甚至可以说,它是一个非常高效且灵活的选择。核心在于利用…

    2026年9月22日
    100
  • Linux基础必知必会(一)

    文章目录 前言 一、初识Linux操作系统 二、网络配置原理 三、虚拟机网络配置原理 四、虚拟机网络环境配置 五、远程工具Xshell 六、Linux目录结构讲解 七、Linux常用的命令讲解 八、用户和用户组的管理 结语 前言 为什么需要学习Linux系统? 许多人可能疑惑,为什么在当前可视化操作…

    2026年9月22日
    1200
  • Java类中Jackson @JsonNaming策略的运行时内省

    本文介绍如何在运行时动态内省Java类上通过@JsonNaming注解配置的Jackson PropertyNamingStrategy。通过利用ObjectMapper的SerializationConfig和JacksonAnnotationIntrospector,开发者可以编程方式获取类的命…

    2026年9月22日
    600
  • VSCode安装C/C++文档查看 提升开发效率的VSCode技巧

    答案是利用C/C++扩展和cppreference插件实现高效文档查阅。首先安装微软官方C/C++扩展,启用智能感知与悬停提示;再安装cppreference扩展,通过命令面板直接搜索标准库函数,实现离线在线无缝查阅;结合Doxygen生成项目文档,使用“转到定义”功能快速跳转源码;同时借助Inte…

    2026年9月22日
    100
  • 高效利用 PriorityQueue 合并并排序多个列表

    本教程详细阐述了如何使用 Java 的 PriorityQueue 高效地合并并排序多个整数列表。文章首先指出将列表作为元素放入 PriorityQueue 的常见误区,进而纠正为应将单个整数元素放入队列。接着,它演示了如何正确声明、填充 PriorityQueue,并强调了通过循环调用 poll(…

    2026年9月22日
    400
  • 如何配置Android开发环境 Android Studio安装与JDK配置方法

    答案:配置Android开发环境需先安装JDK并设置环境变量,再下载安装Android Studio,配置SDK及虚拟设备,最后创建项目测试。具体步骤包括:1. 安装JDK 17并配置JAVA_HOME和Path;2. 从官网下载Android Studio并安装,自动集成SDK;3. 通过SDK …

    2026年9月22日
    200
  • ClipStudioPaintPro如何导出AI漫画图片?保存图像的详细指南

    导出AI漫画图片需通过Clip Studio Paint Pro的“文件”菜单选择“导出”,根据用途选单页、多页或Webtoon导出,推荐PNG用于高质量或透明背景需求,JPG用于网络分享以平衡文件大小与画质,设置300dpi以上分辨率确保清晰度,色彩配置选用sRGB保障跨平台一致性,批量导出时利用…

    2026年9月22日
    200

发表回复

登录后才能评论
关注微信