Golang 如何编写并发安全的日志系统_Golang 多协程文件写入方案实战

答案:高并发下Go日志写入需避免数据竞争,可通过Mutex加锁或channel异步队列实现线程安全;前者简单但性能低,后者解耦生产消费、支持缓冲,结合lumberjack还可实现轮转,推荐高并发场景使用。

golang 如何编写并发安全的日志系统_golang 多协程文件写入方案实战

在高并发场景下,多个协程同时写入日志容易引发数据竞争、文件损坏或日志错乱。Golang 虽然没有内置的并发安全日志系统,但通过合理设计可以轻松构建一个高效、线程安全的日志模块。以下是实战中常用的多协程文件写入方案。

使用互斥锁(Mutex)保护文件写入

最直接的方式是用 sync.Mutex 保证同一时间只有一个协程能执行写操作。

示例代码:

package main

import ("log""os""sync")

var (file os.Filemu sync.Mutexlogger log.Logger)

func init() {var err errorfile, err = os.OpenFile("app.log", os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0666)if err != nil {log.Fatal("无法打开日志文件:", err)}logger = log.New(file, "", log.LstdFlags)}

func Log(message string) {mu.Lock()defer mu.Unlock()logger.Println(message)}

func main() {defer file.Close()

var wg sync.WaitGroupfor i := 0; i < 100; i++ {    wg.Add(1)    go func(id int) {        defer wg.Done()        Log("来自协程 " + string(rune(id+'0')))    }(i)}wg.Wait()

}

优点:实现简单,逻辑清晰。缺点:高并发下锁竞争严重,性能下降。

使用 channel 实现日志队列异步写入

更高效的方案是引入消息队列模型,所有协程将日志发送到 channel,由单个写入协程处理落盘。

立即学习“go语言免费学习笔记(深入)”;

改进版示例:

package main

import ("bufio""log""os")

type Logger struct {ch chan string}

func NewLogger(filename string, bufferSize int) *Logger {l := &Logger{ch: make(chan string, bufferSize),}file, err := os.OpenFile(filename, os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0666)if err != nil {log.Fatal("打开日志文件失败:", err)}

writer := bufio.NewWriter(file)go func() {    for line := range l.ch {        _, _ = writer.WriteString(line + "n")        _ = writer.Flush() // 可根据性能需求调整是否实时 flush    }    _ = writer.Flush()    _ = file.Close()}()return l

}

func (l *Logger) Log(msg string) {select {case l.ch

func main() {logger := NewLogger("async.log", 1000)

var wg sync.WaitGroupfor i := 0; i < 1000; i++ {    wg.Add(1)    go func(id int) {        defer wg.Done()        logger.Log("处理完成 - ID:" + strconv.Itoa(id))    }(i)}wg.Wait()// 简单等待,实际中可用 context 或 close channel 控制退出time.Sleep(time.Second)

}

优势:写入协程串行化,避免锁开销;生产消费解耦;支持缓冲和背压控制。

结合轮转(Rotate)与并发安全设计

真实项目中还需考虑日志文件大小限制和轮转。可封装第三方库如 lumberjack 配合上述模式使用。

集成 lumberjack 示例:

import (    "gopkg.in/natefinch/lumberjack.v2"    "log")

func NewRotatingLogger() *log.Logger {writer := &lumberjack.Logger{Filename: "logs/app.log",MaxSize: 10, // MBMaxBackups: 5,MaxAge: 7, // 天Compress: true,}return log.New(writer, "", log.LstdFlags)}

lumberjack 本身是线程安全的,可直接用于多协程环境。若配合 channel 模式,性能更优且不影响主流程响应速度。

基本上就这些。选择哪种方案取决于性能要求和系统复杂度。小项目用 Mutex 足够,高并发服务推荐 channel + 异步写入模型。关键是避免多个 goroutine 直接操作同一个文件句柄。

以上就是Golang 如何编写并发安全的日志系统_Golang 多协程文件写入方案实战的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1426713.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
Go语言中实现文件类型识别的跨平台方法
上一篇 2025年12月16日 20:45:22
Go语言获取图片尺寸的正确实践指南
下一篇 2025年12月16日 20:45:36

相关推荐

  • Java中利用正则表达式从JSON数组中提取独立JSON对象

    本文详细介绍了如何利用Java正则表达式从格式化的JSON数组中提取独立的JSON对象字符串。通过一个具体的代码示例,文章展示了如何构建一个精确的正则表达式模式来匹配并分离数组中的每个JSON实体,并提供了Java代码实现,包括去除多余空白字符的步骤,最终实现将JSON数组解析为可操作的独立对象字符…

    2026年9月23日
    100
  • 微星Z790 GODLIKE对决华硕ROG MAXIMUS Z790 HERO:旗舰主板的供电与超频潜力,谁才是超频玩家的梦幻舞台?

    微星Z790 GODLIKE供电更强、内存超频潜力更高,扩展性全面领先,适合追求极限性能的用户;华硕ROG MAXIMUS Z790 HERO性能顶尖且功能均衡,更适合高端实用主义者。 选旗舰主板,核心是看供电和超频潜力。微星MEG Z790 GODLIKE和华硕ROG MAXIMUS Z790 H…

    2026年9月23日
    200
  • PrestaShop分类描述在分页时隐藏的机制与SEO考量

    本教程探讨PrestaShop商店中分类描述在分页时消失的现象。我们将解释为何在访问第二页或后续页面时,分类描述不再显示,甚至在返回第一页后也可能消失。文章将从技术实现和搜索引擎优化(SEO)的角度分析这一行为,强调其通常并非问题,并提供专业见解。 PrestaShop分类描述分页行为解析 在pre…

    2026年9月23日
    100
  • 赛力斯与字节跳动合作研发具身智能机器人技术

    赛力斯集团旗下子公司重庆凤凰技术近日与字节跳动旗下的火山引擎正式签署战略合作协议,双方将携手推进具身智能机器人技术的联合研发。 此次合作聚焦于“多模态云边协同的智能机器人决策、控制与人机增强技术”,旨在建立“技术研发—场景验证”一体化闭环体系。火山引擎将提供包括AI算法、多模态大模型及强大算力在内的…

    2026年9月23日
    000
  • VSCode如何配置生物信息开发环境 VSCode基因组数据分析工作流

    vscode在生物信息学中的核心配置是通过安装python、r、remote-ssh/containers/wsl等扩展,结合conda管理环境,实现多语言支持与远程开发;2. 处理大规模基因组数据时应避免直接打开大文件,而是通过集成终端调用命令行工具(如samtools、bcftools)在远程服…

    2026年9月23日
    000
  • mysql如何输入注释 mysql写sql代码的格式规范

    mysql如何输入注释 mysql写sql代码的格式规范mysql如何输入注释 mysql写sql代码的格式规范mysql如何输入注释 mysql写sql代码的格式规范mysql如何输入注释 mysql写sql代码的格式规范

    在mysql中,单行注释使用–(后跟空格)或#,多行注释使用/*…*/。1. 注释应解释“为什么”而非“是什么”,单行注释推荐使用–,#常用于脚本开头;2. 多行注释适用于复杂逻辑说明或版权信息;3. sql格式规范包括关键词大写、统一缩进、合理换行与逗号放置,以…

    2026年9月23日 用户投稿
    400
  • CodeIgniter 4 API:捕获并返回HTTP响应中的错误

    在使用CodeIgniter 4构建API服务时,我们经常需要处理各种异常情况。默认情况下,CodeIgniter 4会将错误信息记录到日志文件中,但不会直接将其返回到HTTP响应中。这导致我们需要频繁地查看日志文件来排查问题,效率较低。为了解决这个问题,我们可以通过修改配置文件,将错误信息直接暴露…

    2026年9月23日
    000
  • safari浏览器如何开启画中画模式播放视频_safari浏览器画中画模式开启方法

    如果您在观看网页视频时希望同时进行其他操作,可以启用 Safari 浏览器的画中画模式,让视频以浮动小窗形式继续播放。此功能支持大多数主流视频网站,如 YouTube、优酷等。 本文运行环境:MacBook Air,macOS Sonoma 一、通过视频右键菜单开启画中画 此方法适用于正在播放的视频…

    2026年9月23日
    000
  • go 语言版本控制器

    管理不同版本的go语言环境是一项繁琐的任务,尤其是当需要为每个go特性单独安装go环境时。为了简化这一过程,我们需要一个版本管理工具来统一管理go环境。以下是关于go版本控制器g的详细介绍。 一、Go版本控制器g简介 g是一个适用于Linux、macOS和Windows的命令行工具,旨在提供一个方便…

    2026年9月23日
    000
  • 抖音app如何关注其他用户

    在抖音这个充满创意与乐趣的平台上,关注他人是发掘优质内容、拓展社交圈的重要途径。那么,该如何在抖音app中关注其他用户呢? 首先,打开抖音App。进入首页后,你会看到源源不断的短视频自动播放。在屏幕顶部,搜索栏旁有一个“放大镜”图标,点击即可进入搜索页面。在这里,你可以通过输入用户名、关键词等方式查…

    2026年9月23日
    200
  • FlexClip如何用于在线AI视频制作?快速创建云端AI视频的技巧

    FlexClip如何用于在线AI视频制作?快速创建云端AI视频的技巧FlexClip如何用于在线AI视频制作?快速创建云端AI视频的技巧FlexClip如何用于在线AI视频制作?快速创建云端AI视频的技巧FlexClip如何用于在线AI视频制作?快速创建云端AI视频的技巧

    FlexClip通过AI脚本生成、文本转视频、AI配音与图片生成等智能工具,实现从文案到成片的高效制作。其亮点在于一站式云端操作、强大内容生成力、素材库丰富、易用性与专业性兼备。用户可通过个性化修改、原创素材融入、精细剪辑及多轮迭代提升视频独特性,同时应对AI理解偏差、素材同质化、情感表达局限等挑战…

    2026年9月23日 用户投稿
    000
  • mysql怎么添加降序索引 mysql创建排序索引的语法详解

    mysql怎么添加降序索引 mysql创建排序索引的语法详解mysql怎么添加降序索引 mysql创建排序索引的语法详解mysql怎么添加降序索引 mysql创建排序索引的语法详解mysql怎么添加降序索引 mysql创建排序索引的语法详解

    mysql从8.0版本开始支持降序索引,通过在列名后添加desc关键字创建,例如create index idx_order_date_desc on orders (order_date desc);。1. 降序索引优化了order by column desc查询的性能,避免文件排序;2. 升序…

    2026年9月23日 用户投稿
    100
  • Java中使用栈验证JSON字符串结构:深入理解与实践

    本文探讨了在Java中利用栈验证JSON字符串结构的核心原理与常见陷阱。我们将分析一种初始实现中处理引号、转义字符及字符串内部结构字符的不足,并提供一个更健壮的栈基方法,以准确判断JSON的括号、方括号和引号是否平衡,同时纠正关于不完整JSON片段有效性的常见误解。 1. JSON结构与验证的重要性…

    2026年9月23日
    100
  • mysql索引类型有哪些 mysql创建不同索引的方法对比

    mysql索引类型有哪些 mysql创建不同索引的方法对比mysql索引类型有哪些 mysql创建不同索引的方法对比mysql索引类型有哪些 mysql创建不同索引的方法对比mysql索引类型有哪些 mysql创建不同索引的方法对比

    mysql支持多种索引类型,选择合适的索引类型可提升数据库性能。1.b-tree索引适用于等值、范围查询和排序,是innodb和myisam的默认索引;2.hash索引仅适合等值查询,不支持范围和排序,memory引擎支持显式创建;3.fulltext索引用于文本搜索,适合关键词查找;4.空间索引(…

    2026年9月23日 用户投稿
    000
  • 京东自营外卖门店“七鲜小厨”入驻美团

    10 月 13 日消息,据电商派今日报道,京东自营外卖门店“七鲜小厨”已正式登陆美团 app。与此同时,京东全新推出的独立咖啡品牌“七鲜咖啡”也同步上线美团平台。 京东首家“七鲜小厨”自营外卖门店于今年7月20日在北京市东城区开业,采用“外卖 + 自提”的运营模式,不设堂食服务,用户可通过线上渠道下…

    2026年9月23日
    000
  • QQ音乐会员退订后还能听吗_QQ音乐会员退订后听歌的说明

    退订QQ音乐会员后将无法享受高音质、无广告等权益,系统自动切换至免费模式。此时仅可播放标有“免费”或无版权标识的歌曲,VIP歌曲需开通会员才能畅听。已下载的加密格式会员歌曲(如.QMC、.TMF)在会员过期后无法继续播放,需重新开通会员解密。免费用户可通过观看广告解锁每日最多5首歌曲完整播放,每次看…

    2026年9月23日
    300
  • Tableau的AI混合工具如何操作?生成智能数据可视化的实用指南

    Tableau的AI混合工具通过自然语言查询、自动解释和预测模型,降低数据分析门槛,帮助非技术用户快速获取洞察。首先,Ask Data支持用日常语言提问,自动生成可视化图表,显著提升数据探索效率;其次,Explain Data利用机器学习分析异常点,揭示潜在影响因素,将“是什么”转化为“为什么”;再…

    2026年9月23日
    000
  • mysql安装完成如何事件 mysql定时任务设置教程

    mysql安装完成如何事件 mysql定时任务设置教程mysql安装完成如何事件 mysql定时任务设置教程mysql安装完成如何事件 mysql定时任务设置教程mysql安装完成如何事件 mysql定时任务设置教程

    要使用mysql的事件调度器设置定时任务,首先需开启事件调度器,其次创建定时事件,再查看管理事件,最后注意权限与时间格式等问题。具体步骤如下:1. 开启事件调度器:通过命令或配置文件启用;2. 创建事件:使用create event定义执行频率与sql操作;3. 管理事件:可查看、修改或删除已有事件…

    2026年9月23日 用户投稿
    100
  • OpenAI 与微软达成重磅交易:股权结构再变,投资者面临稀释风险

    据《金融时报》披露,OpenAI 近期完成了一系列关键性交易,使其股权架构日趋复杂,同时也加剧了投资者对未来收益前景的担忧。在这些新协议推动下,OpenAI 的估值已飙升至5000亿美元,跃居全球最具价值的未上市企业之列。这一惊人估值的背后,是公司与英伟达和AMD两家芯片巨头达成的数十亿美元合作协议…

    2026年9月23日
    100
  • windows怎么更改系统默认字体 windows系统默认字体更改教程

    可通过修改注册表、使用第三方工具或更换主题间接更改Windows默认字体。首先备份系统,避免操作失误导致界面异常。 如果您发现Windows系统的默认字体显示效果不理想,或者希望个性化界面外观,可以通过修改系统设置或注册表来更改默认字体。以下是实现这一目标的具体步骤。 本文运行环境:Dell XPS…

    2026年9月23日
    000

发表回复

登录后才能评论
关注微信