阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

简单介绍Go sync WaitGroup使用深入理解

268次阅读
没有评论

共计 2345 个字符,预计需要花费 6 分钟才能阅读完成。

导读 这篇文章主要为大家介绍了 Go sync WaitGroup 使用深入理解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪
基本介绍

WaitGroup 是 go 用来做任务编排的一个并发原语,它要解决的就是并发 – 等待的问题:

当有一个 goroutine A 在检查点(checkpoint)等待一组 goroutine 全部完成,如果这些 goroutine 还没全部完成,goroutine A 就会阻塞在检查点,直到所有 goroutine 都完成后才能继续执行

试想如果没有 WaitGroup,想要在协程 A 等到其他协程执行完成后能立马执行,只能不断轮询其他协程是否执行完毕,这样的问题是:

  • 及时性差:轮询间隔越高,及时性越差
  • 无谓的空轮训,浪费系统资源
  • 而用 WaitGroup 时,协程 A 只用阻塞,直到其他协程执行完毕后,再通知协程 A, 其他语言也提供了类似的工具,例如 Java 的 CountDownLatch

    使用

    Waitgroup 提供了 3 个方法:

    func (wg *WaitGroup) Add(delta int)
    func (wg *WaitGroup) Done()
    func (wg *WaitGroup) Wait()

    Add:增加计数值

    Done:减少计数值

    Wait:调用这个方法的 goroutine 会一直阻塞,直到 WaitGroup 的计数值变为 0

    源码分析
    type WaitGroup struct {
       // 避免复制
       noCopy noCopy
       // 64 位环境下,高 32 位是计数值,低 32 位记录 waiter 的数量
       state1 uint64
       // 用于信号量
       state2 uint32
    }
    Add
    func (wg *WaitGroup) Add(delta int) {
       // 获取状态值,信号量
       statep, semap := wg.state()
       // 将参数 delta 左 32 位,加到 statep 中,即给计数值加上 delta
       state := atomic.AddUint64(statep, uint64(delta)> 32)
       // waiter 的数量
       w := uint32(state)
       // 加后不能是负值
       if v  0 && v == int32(delta) {panic( "sync: WaitGroup misuse: Add called concurrently with Wait")
       }
       // 如果加完后 v 大于 0,或者加完后 v 等于 0,但没有等待者,直接返回
       if v > 0 || w == 0 {return}
       // 接下来就是 v 等于 0,且 w 大于 0 的情况
       // 再次检查是否有 Add 和 Wait 并发调用的情况
       if *statep != state {panic( "sync: WaitGroup misuse: Add called concurrently with Wait")
       }
       // 将计数值和 waiter 数量清 0
       *statep = 0
       // 唤醒所有的 waiter
       for ; w != 0; w-- {runtime_Semrelease(semap, false, 0)
       }
    }
  • 因为 state 高 32 位保存计数值,因此需要将参数 delta 左移 32 位后加到 state 上才正确
  • 如果加完后 v 大于 0,或者加完后 v 等于 0,但没有等待者,直接返回

  • v 大于 0:表示自己不是最后一个调用 Done 的协程,不用自己来释放 waiter,直接返回
  • v 等于 0,但没有等待者:因为没有等待者,也就不用释放等待者,也直接返回
  • 否则就是 v 等于 0,且 w 大于 0 的情况:

    自己是最后一个调用 Done 的,且还有等待者,那就唤醒所有等待者

    Done

    Done 内部调用 Add,只是参数传 -1,表示减少计数值

    func (wg *WaitGroup) Done() {wg.Add(-1)
    }
    Wait
    func (wg *WaitGroup) Wait() {statep, semap := wg.state()
       for {state := atomic.LoadUint64(statep)
          // v:计数值
          v := int32(state >> 32)
          w := uint32(state)
          // 如果计数值为 0,自己不需要等到,直接返回
          if v == 0 {return}
          // 增加 waiter 计数值
     if atomic.CompareAndSwapUint64(statep, state, state+1) {
             // 自己在信号量上阻塞
             runtime_Semacquire(semap)
             // 检查 Waitgroup 是否在 wait 返回前被重用
             if *statep != 0 {panic( "sync: WaitGroup is reused before previous Wait has returned")
             }
             return
          }
       }
    }

    如果计数值为 0,当前不需要阻塞,直接返回

    否则将 waiter 数量加 1,如果添加成功,就把自己阻塞到信号量上

    被唤醒时,如果 statep 不为 0,表示该 waitgroup 是否在 wait 返回前被重用了,panic

    注意事项

    通过源码分析可以看出,Waitgroup 有以下使用注意事项:

    计数器的值必须大于等于 0:

    一开始调用 Add 时,不能传负数

    调用 Done 的次数不能过多,导致超过了 WaitGroup 的计数值

    因此使用 WaitGroup 的正确姿势是,预先确定好 WaitGroup 的计数值,然后调用相同次数的 Done 完成相应的任务

    要保证在期望的 Add 调用完成后,再调用 Wait,否则 Wait 发现计数值为 0 时不会阻塞

    最好在一个协程中,按顺序先调 Add,再调 Wait

    需要重用时,需要在前一组调用 Wait 结束后,再开始新一轮的使用

    WaitGroup 是可以重用的。只要 WaitGroup 的计值恢复到零值的状态,那么它就可以被看作是新创建的 WaitGroup,被重复使用,而不能在前一组没使用完的情况下又使用

    阿里云 2 核 2G 服务器 3M 带宽 61 元 1 年,有高配

    腾讯云新客低至 82 元 / 年,老客户 99 元 / 年

    代金券:在阿里云专用满减优惠券

    正文完
    星哥玩云-微信公众号
    post-qrcode
     0
    星锅
    版权声明:本站原创文章,由 星锅 于2024-07-24发表,共计2345字。
    转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
    【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
    阿里云-最新活动爆款每日限量供应
    评论(没有评论)
    验证码
    【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

    星哥玩云

    星哥玩云
    星哥玩云
    分享互联网知识
    用户数
    4
    文章数
    19348
    评论数
    4
    阅读量
    7805071
    文章搜索
    热门文章
    开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

    开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

    开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
    星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

    星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

    星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
    云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

    云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

    云服务器部署服务器面板 1Panel:小白轻松构建 Web 服务与面板加固指南 哈喽,我是星哥,经常有人问我不...
    我把用了20年的360安全卫士卸载了

    我把用了20年的360安全卫士卸载了

    我把用了 20 年的 360 安全卫士卸载了 是的,正如标题你看到的。 原因 偷摸安装自家的软件 莫名其妙安装...
    星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

    星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

    星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
    阿里云CDN
    阿里云CDN-提高用户访问的响应速度和成功率
    随机文章
    使用1Panel面板搭建属于你的AI项目环境

    使用1Panel面板搭建属于你的AI项目环境

    使用 1Panel 面板搭建属于你的 AI 项目环境 在 AI 项目越来越火的今天,很多朋友都想自己动手搭建一...
    开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

    开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

    开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
    再见zabbix!轻量级自建服务器监控神器在Linux 的完整部署指南

    再见zabbix!轻量级自建服务器监控神器在Linux 的完整部署指南

    再见 zabbix!轻量级自建服务器监控神器在 Linux 的完整部署指南 在日常运维中,服务器监控是绕不开的...
    亚马逊云崩完,微软云崩!当全球第二大云“摔了一跤”:Azure 宕机背后的配置风险与警示

    亚马逊云崩完,微软云崩!当全球第二大云“摔了一跤”:Azure 宕机背后的配置风险与警示

    亚马逊云崩完,微软云崩!当全球第二大云“摔了一跤”:Azure 宕机背后的配置风险与警示 首先来回顾一下 10...
    告别Notion焦虑!这款全平台开源加密笔记神器,让你的隐私真正“上锁”

    告别Notion焦虑!这款全平台开源加密笔记神器,让你的隐私真正“上锁”

      告别 Notion 焦虑!这款全平台开源加密笔记神器,让你的隐私真正“上锁” 引言 在数字笔记工...

    免费图片视频管理工具让灵感库告别混乱

    一言一句话
    -「
    手气不错
    星哥带你玩飞牛NAS-16:不再错过公众号更新,飞牛NAS搭建RSS

    星哥带你玩飞牛NAS-16:不再错过公众号更新,飞牛NAS搭建RSS

      星哥带你玩飞牛 NAS-16:不再错过公众号更新,飞牛 NAS 搭建 RSS 对于经常关注多个微...
    多服务器管理神器 Nexterm 横空出世!NAS/Win/Linux 通吃,SSH/VNC/RDP 一站式搞定

    多服务器管理神器 Nexterm 横空出世!NAS/Win/Linux 通吃,SSH/VNC/RDP 一站式搞定

    多服务器管理神器 Nexterm 横空出世!NAS/Win/Linux 通吃,SSH/VNC/RDP 一站式搞...
    安装Black群晖DSM7.2系统安装教程(在Vmware虚拟机中、实体机均可)!

    安装Black群晖DSM7.2系统安装教程(在Vmware虚拟机中、实体机均可)!

    安装 Black 群晖 DSM7.2 系统安装教程(在 Vmware 虚拟机中、实体机均可)! 前言 大家好,...
    Prometheus:监控系统的部署与指标收集

    Prometheus:监控系统的部署与指标收集

    Prometheus:监控系统的部署与指标收集 在云原生体系中,Prometheus 已成为最主流的监控与报警...
    安装并使用谷歌AI编程工具Antigravity(亲测有效)

    安装并使用谷歌AI编程工具Antigravity(亲测有效)

      安装并使用谷歌 AI 编程工具 Antigravity(亲测有效) 引言 Antigravity...