我的编程空间,编程开发者的网络收藏夹
学习永远不晚

Golang中 WaitGroup的实现原理是什么

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

Golang中 WaitGroup的实现原理是什么

这篇文章给大家介绍Golang中 WaitGroup的实现原理是什么,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。

1 前言

WaitGroup是Golang应用开发过程中经常使用的并发控制技术。

WaitGroup,可理解为Wait-Goroutine-Group,即等待一组goroutine结束。比如某个goroutine需要等待其他几个goroutine全部完成,那么使用WaitGroup可以轻松实现。

package mainimport (    "fmt"    "time"    "sync")func main() {    var wg sync.WaitGroup    wg.Add(2) //设置计数器,数值即为goroutine的个数    go func() {        //Do some work        time.Sleep(1*time.Second)        fmt.Println("Goroutine 1 finished!")        wg.Done() //goroutine执行结束后将计数器减1    }()    go func() {        //Do some work        time.Sleep(2*time.Second)        fmt.Println("Goroutine 2 finished!")        wg.Done() //goroutine执行结束后将计数器减1    }()    wg.Wait() //主goroutine阻塞等待计数器变为0    fmt.Printf("All Goroutine finished!")}

简单的说,上面程序中wg内部维护了一个计数器:

  1. 启动goroutine前将计数器通过Add(2)将计数器设置为待启动的goroutine个数。

  2. 启动goroutine后,使用Wait()方法阻塞自己,等待计数器变为0。

  3. 每个goroutine执行结束通过Done()方法将计数器减1。

  4. 计数器变为0后,阻塞的goroutine被唤醒。

其实WaitGroup也可以实现一组goroutine等待另一组goroutine,这有点像玩杂技,很容出错,如果不了解其实现原理更是如此。实际上,WaitGroup的实现源码非常简单。

2 基础知识

2.1 信号量

信号量是Unix系统提供的一种保护共享资源的机制,用于防止多个线程同时访问某个资源。

可简单理解为信号量为一个数值:

  • 当信号量>0时,表示资源可用,获取信号量时系统自动将信号量减1;

  • 当信号量==0时,表示资源暂不可用,获取信号量时,当前线程会进入睡眠,当信号量为正时被唤醒;

由于WaitGroup实现中也使用了信号量,在此做个简单介绍。

3 WaitGroup

3.1 数据结构

源码包中class="lazy" data-src/sync/waitgroup.go:WaitGroup定义了其数据结构:

type WaitGroup struct {state1 [3]uint32}

state1是个长度为3的数组,其中包含了state和一个信号量,而state实际上是两个计数器:

  • counter: 当前还未执行结束的goroutine计数器

  • waiter count: 等待goroutine-group结束的goroutine数量,即有多少个等候者

  • semaphore: 信号量

考虑到字节是否对齐,三者出现的位置不同,为简单起见,依照字节已对齐情况下,三者在内存中的位置如下所示:

Golang中 WaitGroup的实现原理是什么

WaitGroup对外提供三个接口:

  • Add(delta int): 将delta值加到counter中

  • Wait(): waiter递增1,并阻塞等待信号量semaphore

  • Done(): counter递减1,按照waiter数值释放相应次数信号量

下面分别介绍这三个函数的实现细节。

3.2 Add(delta int)

Add()做了两件事,一是把delta值累加到counter中,因为delta可以为负值,也就是说counter有可能变成0或负值,所以第二件事就是当counter值变为0时,跟据waiter数值释放等量的信号量,把等待的goroutine全部唤醒,如果counter变为负值,则panic.

Add()伪代码如下:

func (wg *WaitGroup) Add(delta int) {    statep, semap := wg.state() //获取state和semaphore地址指针        state := atomic.AddUint64(statep, uint64(delta)<<32) //把delta左移32位累加到state,即累加到counter中    v := int32(state >> 32) //获取counter值    w := uint32(state)      //获取waiter值        if v < 0 {              //经过累加后counter值变为负值,panic        panic("sync: negative WaitGroup counter")    }    //经过累加后,此时,counter >= 0    //如果counter为正,说明不需要释放信号量,直接退出    //如果waiter为零,说明没有等待者,也不需要释放信号量,直接退出    if v > 0 || w == 0 {        return    }    //此时,counter一定等于0,而waiter一定大于0(内部维护waiter,不会出现小于0的情况),    //先把counter置为0,再释放waiter个数的信号量    *statep = 0    for ; w != 0; w-- {        runtime_Semrelease(semap, false) //释放信号量,执行一次释放一个,唤醒一个等待者    }}

3.3 Wait()

Wait()方法也做了两件事,一是累加waiter, 二是阻塞等待信号量

func (wg *WaitGroup) Wait() {    statep, semap := wg.state() //获取state和semaphore地址指针    for {        state := atomic.LoadUint64(statep) //获取state值        v := int32(state >> 32)            //获取counter值        w := uint32(state)                 //获取waiter值        if v == 0 {                        //如果counter值为0,说明所有goroutine都退出了,不需要待待,直接返回            return        }                // 使用CAS(比较交换算法)累加waiter,累加可能会失败,失败后通过for loop下次重试        if atomic.CompareAndSwapUint64(statep, state, state+1) {            runtime_Semacquire(semap) //累加成功后,等待信号量唤醒自己            return        }    }}

这里用到了CAS算法保证有多个goroutine同时执行Wait()时也能正确累加waiter。

3.4 Done()

Done()只做一件事,即把counter减1,我们知道Add()可以接受负值,所以Done实际上只是调用了Add(-1)。

源码如下:

func (wg *WaitGroup) Done() {wg.Add(-1)}

Done()的执行逻辑就转到了Add(),实际上也正是最后一个完成的goroutine把等待者唤醒的。

4 编程Tips

  • Add()操作必须早于Wait(), 否则会panic

  • Add()设置的值必须与实际等待的goroutine个数一致,否则会panic

关于Golang中 WaitGroup的实现原理是什么就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

Golang中 WaitGroup的实现原理是什么

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Golang中 WaitGroup的实现原理是什么

这篇文章给大家介绍Golang中 WaitGroup的实现原理是什么,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。1 前言WaitGroup是Golang应用开发过程中经常使用的并发控制技术。WaitGroup,可理解
2023-06-19

Golang中map的实现原理是什么

这篇“Golang中map的实现原理是什么”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“Golang中map的实现原理是什么
2023-07-05

golang select的实现原理是什么

在Go语言中,`select`语句用于从多个通道中接收数据,并且只有当其中一个通道可以接收数据时,`select`语句才会执行相应的代码块。`select`语句的实现原理是通过轮询的方式来监听通道的状态。当`select`语句执行时,它会
2023-10-27

golang锁的实现原理是什么

golang锁的实现原理是通过互斥锁和读写锁来保护共享资源的访问。互斥锁是一种基本的锁机制,用于保护共享资源,使用一个标志位来表示资源是否被占用,当一个goroutine获取到互斥锁后,其他goroutine就会被阻塞,直到该gorouti
golang锁的实现原理是什么
2023-12-12

golang map实现原理是什么

Golang中的map是一种哈希表数据结构,用于存储键值对。它的实现原理是使用哈希函数将键映射到哈希表中的一个桶(bucket),每个桶中存储多个键值对。具体实现原理如下:1. 创建一个哈希表,哈希表中包含多个桶。2. 哈希函数将键映射到哈
2023-08-15

golang协程实现的原理是什么

Golang中的协程(goroutine)是一种轻量级的线程,由Go语言的运行时系统进行管理。协程的实现原理主要包括以下几个方面:调度器:Golang的运行时系统包含一个调度器,负责协程的创建、调度和管理。调度器使用了一种称为"工作窃取"的
2023-10-25

golang协程实现原理是什么

Golang协程实现的原理是使用了一种称为"轻量级线程"或"用户态线程"的概念,即Goroutine(协程)。在Goroutine中,不会为每个协程创建一个完整的操作系统线程,而是通过使用更少的内存和资源,将多个协程调度在少量的操作系统线程
2023-08-31

golang对象池的实现原理是什么

Golang对象池是一种用于重复利用对象的机制,以避免频繁的创建和销毁对象的开销。它通过预先创建一定数量的对象,并在需要时从池中获取对象,使用完毕后再将对象放回池中,以供后续的使用。Golang对象池的实现原理主要包括以下几个步骤:初始化
2023-10-27

golang map底层实现原理是什么

Golang中的map是基于散列表(hash table)实现的。散列表是一种用于存储键值对的数据结构,它通过将键映射到数组的索引来实现高效的插入、查找和删除操作。具体来说,Golang中的map底层实现原理如下:Golang的map使用
2023-10-21

golang协程调度的实现原理是什么

Golang的协程调度器采用了一种称为M:N调度的策略。这意味着它将M个用户级线程(也称为goroutines)调度到N个内核级线程(也称为操作系统线程)上执行。调度器的实现原理如下:调度器会在启动时创建一组操作系统线程,称为M。这些线程
2023-10-27

Java中 AOP 的实现原理究竟是什么?(java中aop的实现原理是什么)

在Java开发中,AOP(Aspect-OrientedProgramming,面向切面编程)是一种重要的编程范式,它允许开发者将横切关注点(如日志记录、事务管理、性能监控等)从业务逻辑中分离出来,以提高代码的可维护性和可扩展性。那么,Java中AOP的实现原理是什么呢?
Java中 AOP 的实现原理究竟是什么?(java中aop的实现原理是什么)
Java2024-12-20

Java 中 Lock 的实现原理究竟是什么?(java中lock的实现原理是什么)

在Java编程中,Lock是用于线程同步的工具,它提供了比synchronized关键字更灵活的线程同步机制。本文将深入探讨Java中Lock的实现原理。一、synchronized关键字的局限性synchr
Java 中 Lock 的实现原理究竟是什么?(java中lock的实现原理是什么)
Java2024-12-22

Golang基础学习之map的实现原理是什么

这篇文章主要讲解了“Golang基础学习之map的实现原理是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Golang基础学习之map的实现原理是什么”吧!0. 简介哈希表是常见的数据结
2023-07-05

Golang原生rpc的原理是什么

这篇文章主要讲解了“Golang原生rpc的原理是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Golang原生rpc的原理是什么”吧!创建rpc接口,需要几个条件方法的类型是可输出的方
2023-06-29

Python中hook的实现原理是什么

在Python中,hook(钩子)是一种机制,允许开发者在特定事件(例如函数调用、异常发生等)发生时插入自定义的代码进行处理。实现原理主要基于Python的装饰器(Decorator)和元编程的概念。装饰器是Python中一种用来修饰函数或
2023-09-26

linux中fork的实现原理是什么

在Linux中,fork是创建新进程的系统调用之一。当调用fork系统调用时,操作系统会复制当前进程的所有资源(包括代码、数据、堆栈等)来创建一个新的进程,这个新的进程称为子进程。子进程是原始进程的副本,它从fork调用返回的地方开始执行。
2023-09-11

编程热搜

  • Python 学习之路 - Python
    一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
    Python 学习之路 - Python
  • chatgpt的中文全称是什么
    chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
    chatgpt的中文全称是什么
  • C/C++中extern函数使用详解
  • C/C++可变参数的使用
    可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
    C/C++可变参数的使用
  • css样式文件该放在哪里
  • php中数组下标必须是连续的吗
  • Python 3 教程
    Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
    Python 3 教程
  • Python pip包管理
    一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
    Python pip包管理
  • ubuntu如何重新编译内核
  • 改善Java代码之慎用java动态编译

目录