我的编程空间,编程开发者的网络收藏夹
学习永远不晚

golang协程关闭实例分析

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

golang协程关闭实例分析

本篇内容主要讲解“golang协程关闭实例分析”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“golang协程关闭实例分析”吧!

场景

结合如下典型场景,主进程中起多个协程,这些协程会

共同消费一个数据通道 data channel

也可能共享一个退出通道channel或context

golang协程关闭实例分析

那么,应该如何正确关闭呢

原则1-协程接受通知主动关闭

并不推荐强制停止,更多的时候我们希望在停止时,干一点事比如资源清理/连接清理等,这时候最好的方式就是通知协程退出,具体何时退出和退出前做什么完全由当前要关闭的协程控制。

通知一般有三种方式

data channel关闭通知退出

适用简单任务,复杂的更推荐context单独通知

// cancelFn 数据通道关闭通知退出func cancelFn(dataChan chan int) {for {select {case val, ok := <-dataChan:// 关闭data通道时,通知退出// 一个可选是判断data=指定值时退出if !ok {log.Printf("Channel closed !!!")return}log.Printf("Revice dataChan %d\n", val)}}}

exit channel关闭通知退出

部分简单场景适用

// exitChannelFn 单独退出通道关闭通知退出func exitChannelFn(wg *sync.WaitGroup, taskNo int, dataChan chan int, exitChan chan struct{}) {defer wg.Done()for {select {case val, ok := <-dataChan:if !ok {log.Printf("Task %d channel closed !!!", taskNo)return}log.Printf("Task %d  revice dataChan %d\n", taskNo, val)// 关闭exit通道时,通知退出case <-exitChan:log.Printf("Task %d  revice exitChan signal!\n", taskNo)return}}}

context超时或取消通知退出

主流推荐

// contextCancelFn context取消或超时通知退出func contextCancelFn(wg *sync.WaitGroup, taskNo int, dataChan chan int, ctx context.Context) {defer wg.Done()for {select {case val, ok := <-dataChan:if !ok {log.Printf("Task %d channel closed !!!", taskNo)return}log.Printf("Task %d  revice dataChan %d\n", taskNo, val)// ctx取消或超时,通知退出case <-ctx.Done():log.Printf("Task %d  revice exit signal!\n", taskNo)return}}}

原则2-谁负责创建协程谁负责关闭协程

go func可以立即创建一个协程,因此常常遇到我们可能在任何一个地方创建协程,但是在哪里关闭呢,是需要统一管理吗?官方推荐的最佳实践就是,谁负责创建协程谁负责关闭协程

参考如下,每次调用execDataTaskFunc函数执行都会起一个协程异步执行,协程关闭通过监控外层函数context参数来实现。

func execDataTaskFunc(ctx context.Context, dataChan chan int, taskName string) chan int {out := make(chan int)log.Printf("Task %s start!\n", taskName)go func() {defer close(out)for {select {case data, ok := <-dataChan:if !ok {log.Printf("Task %s  revice data channel close signal!\n", taskName)return}                // do somethingout <- datacase <-ctx.Done():log.Printf("Task %s  revice exit signal!\n", taskName)return}}}()return out}

原则3-等待所有协程关闭再退出

通常对于正在运行的协程,发出退出通知后,具体程序何时才能退出呢?一般如下三种方式

WaitGroup/ErrGroup判断所有协程关闭后退出

最常用,参考如下

// 多个任务并行控制,等待所有任务完成func TestTaskControl(t *testing.T) {dataChan := make(chan int)taskNum := 3wg := sync.WaitGroup{}wg.Add(taskNum)// 起多个协程,data关闭时退出for i := 0; i < taskNum; i++ {go func(taskNo int) {defer wg.Done()t.Logf("Task %d run\n", taskNo)for {select {case _, ok := <-dataChan:if !ok {t.Logf("Task %d notify to stop\n", taskNo)return}}}}(i)}// 通知退出go func() {time.Sleep(3 * time.Second)close(dataChan)}()// 等待退出完成wg.Wait()}

等待channel关闭后退出

参考如下,对于部分任务场景,协程数据输出到新建的channel中,可以在此channel上阻塞等待,直到协程通知关闭时,关闭此channel然后程序退出。

// 多个任务并行控制,等待所有任务完成func TestTaskControl2(t *testing.T) {dataChan := make(chan int)// 起协程返回新chan,在输出chan等待判断完成out := make(chan int)go func() {defer close(out) // 结束则自动关闭for {select {case _, ok := <-dataChan:if !ok {t.Logf("Task notify to stop\n")return}}}}()// 通知退出go func() {time.Sleep(3 * time.Second)close(dataChan)}()dataChan <- 1// 等待退出完成for data := range out {t.Logf("%d\n", data)}}

等待足够长时间后关闭

对于部分任务,能够估算从通知关闭到实际关闭时间,则可等待足够长时间来保证协程关闭然后退出,实际场景并不推荐,带有一定不确定性,很容易出错

func TestTaskControl3(t *testing.T) {dataChan := make(chan int)// 起协程返回新chanout := make(chan int)go func() {defer close(out) // 结束则自动关闭for {select {case _, ok := <-dataChan:if !ok {t.Logf("Task notify to stop\n")return}}}}()// 通知退出go func() {time.Sleep(3 * time.Second)close(dataChan)}()dataChan <- 1// 等待足够长时间,退出完成time.Sleep(10 * time.Second)}

复杂退出场景

结合三大原则,这里展示部分复杂场景的协程关闭方案。

嵌套协程,同时关闭

如下是多个任务执行,每个任务一个协程,现在考虑如下目标

支持多级嵌套,父任务停止后,子任务自动停止

golang协程关闭实例分析

方案:使用context通知,WaitGroup等待所有任务关闭后退出

任务运行代码

type TaskFunc func(ctx context.Context)func runTaskFunc(wg *sync.WaitGroup, ctx context.Context, taskName string, f TaskFunc) {defer wg.Done()log.Printf("Task %s start!\n", taskName)f(ctx)for {select {case <-ctx.Done():log.Printf("Task %s  revice exit signal!\n", taskName)return}}}

整体实现代码

// 简单并行任务-同时停止func TestStop(t *testing.T) {ctx, cancel := context.WithCancel(context.Background())var wg = sync.WaitGroup{}// 起多个任务wg.Add(1)go runTaskFunc(&wg, ctx, "A", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "B", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "C", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "D", func(ctx context.Context) {})})})wg.Add(1)go runTaskFunc(&wg, ctx, "E", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "F", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "G", func(ctx context.Context) {})})})})// 通知关闭go func() {time.Sleep(3 * time.Second)cancel()}()// 等待全部关闭后退出wg.Wait()}

协程关闭是无序的,如下

2023/01/07 22:40:09 Task A start!
2023/01/07 22:40:09 Task E start!
2023/01/07 22:40:09 Task F start!
2023/01/07 22:40:09 Task G start!
2023/01/07 22:40:09 Task B start!
2023/01/07 22:40:09 Task C start!
2023/01/07 22:40:09 Task D start!
2023/01/07 22:40:12 Task A revice exit signal!
2023/01/07 22:40:12 Task G revice exit signal!
2023/01/07 22:40:12 Task B revice exit signal!
2023/01/07 22:40:12 Task F revice exit signal!
2023/01/07 22:40:12 Task D revice exit signal!
2023/01/07 22:40:12 Task C revice exit signal!
2023/01/07 22:40:12 Task E revice exit signal!

嵌套协程,指定顺序关闭

还是上述场景,现在需求是:控制停止顺序,先停EFG 再停BCD 最后停A

golang协程关闭实例分析

方案:借助context通知,指定多个cancel点,WaitGroup等待所有任务关闭后退出

// 简单并行任务-控制停止顺序func TestStop2(t *testing.T) {ctx, cancel := context.WithCancel(context.Background())ctxb, cancelb := context.WithCancel(ctx)ctxe, cancele := context.WithCancel(ctx)var wg = sync.WaitGroup{}// 起多个任务wg.Add(1)go runTaskFunc(&wg, ctx, "A", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctxb, "B", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "C", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "D", func(ctx context.Context) {})})})wg.Add(1)go runTaskFunc(&wg, ctxe, "E", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "F", func(ctx context.Context) {wg.Add(1)go runTaskFunc(&wg, ctx, "G", func(ctx context.Context) {})})})})// 通知关闭go func() {time.Sleep(3 * time.Second)cancele()time.Sleep(3 * time.Second)cancelb()time.Sleep(3 * time.Second)cancel()}()// 等待全部关闭后退出wg.Wait()}

运行如下,协程按照指定顺序关闭

2023/01/07 22:40:40 Task A start!
2023/01/07 22:40:40 Task E start!
2023/01/07 22:40:40 Task F start!
2023/01/07 22:40:40 Task G start!
2023/01/07 22:40:40 Task B start!
2023/01/07 22:40:40 Task C start!
2023/01/07 22:40:40 Task D start!
2023/01/07 22:40:43 Task E revice exit signal!
2023/01/07 22:40:43 Task F revice exit signal!
2023/01/07 22:40:43 Task G revice exit signal!
2023/01/07 22:40:46 Task B revice exit signal!
2023/01/07 22:40:46 Task D revice exit signal!
2023/01/07 22:40:46 Task C revice exit signal!
2023/01/07 22:40:49 Task A revice exit signal!

嵌套协程,逐级关闭

考虑如下场景,A->B->C嵌套起协程,每个协程创建新的channel传输数据给下游

golang协程关闭实例分析

如下起任务,每个任务可以通过context或者data channel关闭来通知退出

func execDataTaskFunc(ctx context.Context, dataChan chan int, taskName string) chan int {out := make(chan int)//out := make(chan int, 100)log.Printf("Task %s start!\n", taskName)go func() {defer close(out)for {select {case data, ok := <-dataChan:if !ok {log.Printf("Task %s  revice data channel close signal!\n", taskName)return}time.Sleep(2 * time.Second)out <- datacase <-ctx.Done():log.Printf("Task %s  revice exit signal!\n", taskName)return}}}()return out}

整体流程如下

func TestDataTaskStop(t *testing.T) {ctx, cancel := context.WithCancel(context.Background())defer cancel()dataChanInput := make(chan int)// 嵌套运行协程taskChanA := execDataTaskFunc(ctx, dataChanInput, "A")taskChanB := execDataTaskFunc(ctx, taskChanA, "B")taskChanC := execDataTaskFunc(ctx, taskChanB, "C")// 通知退出go func() {i := 0for {select {case <-time.After(time.Second):i = i + 1if i == 10 {t.Logf("Notify to stop!!!")close(dataChanInput)//cancel()return}dataChanInput <- i}}}()//  等待退出for data := range taskChanC {t.Logf("Out->%d", data)}}

这里数据每条数据产生间隔1秒,每个任务处理时长为2秒,也就是说通知关闭时,可能上游任务处理中,下游还没来得及处理,因此期望的是逐级依次关闭A/B/C,确保上游数据处理完成传给下游,不要丢失数据。

对比context通知退出和data channel关闭通知退出,对比如下。可以看到如果我们是有中间处理和逐级关闭需求的还是要依赖close关闭协程来通知,context全局通知退出是无序的,无法保证数据不丢失。

  • cancel()-context通知退出

执行如下,A/B/C同时退出,数据出现丢失

2023/01/07 23:23:59 Task A start!
2023/01/07 23:23:59 Task B start!
2023/01/07 23:23:59 Task C start!
complex_test.go:174: Out->1
complex_test.go:174: Out->2
complex_test.go:174: Out->3
complex_test.go:174: Out->4
complex_test.go:174: Out->5
complex_test.go:174: Out->6
complex_test.go:161: Notify to stop!!!
2023/01/07 23:24:18 Task C revice exit signal!
complex_test.go:174: Out->7

  • close(dataChanInput)通知退出

执行如下,A/B/C逐级依次关闭,数据没有丢失

2023/01/07 23:20:18 Task A start!
2023/01/07 23:20:18 Task B start!
2023/01/07 23:20:18 Task C start!
complex_test.go:174: Out->1
complex_test.go:174: Out->2
complex_test.go:174: Out->3
complex_test.go:174: Out->4
complex_test.go:174: Out->5
complex_test.go:174: Out->6
complex_test.go:161: Notify to stop!!!
complex_test.go:174: Out->7
2023/01/07 23:20:37 Task A revice data channel close signal!
complex_test.go:174: Out->8
2023/01/07 23:20:39 Task B revice data channel close signal!
2023/01/07 23:20:41 Task C revice data channel close signal!
complex_test.go:174: Out->9

到此,相信大家对“golang协程关闭实例分析”有了更深的了解,不妨来实际操作一番吧!这里是编程网网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

golang协程关闭实例分析

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

golang协程关闭实例分析

本篇内容主要讲解“golang协程关闭实例分析”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“golang协程关闭实例分析”吧!场景结合如下典型场景,主进程中起多个协程,这些协程会1.共同消费一个
2023-07-05

golang协程关闭踩坑实战记录

协程(coroutine)是Go语言中的轻量级线程实现,下面这篇文章主要给大家介绍了关于golang协程关闭踩坑的相关资料,文中通过实例代码介绍的非常详细,需要的朋友可以参考下
2023-03-19

linux关闭selinux实例分析

今天小编给大家分享一下linux关闭selinux实例分析的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。关闭方法:1、临时关
2023-06-30

Golang协程的调试与分析

go协程调试和分析go协程调试和分析可帮助解决数据竞态和死锁等问题。调试工具pprof:性能分析工具,用于分析协程调度、内存使用和cpu使用。godebug=schedtrace=10:环境变量,启用协程调度跟踪。go tool trace
Golang协程的调试与分析
2024-04-15

go语言中的协程实例分析

这篇文章主要讲解了“go语言中的协程实例分析”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“go语言中的协程实例分析”吧!协程的特点1.该任务的业务代码主动要求切换,即主动让出执行权限2.发生
2023-07-02

java协程框架quasar和kotlin中的协程实例分析

这篇文章主要介绍“java协程框架quasar和kotlin中的协程实例分析”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“java协程框架quasar和kotlin中的协程实例分析”文章能帮助大家解
2023-06-29

Python的进程,线程和协程实例分析

这篇“Python的进程,线程和协程实例分析”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“Python的进程,线程和协程实例
2023-06-29

对比Golang协程和线程的分析

Golang协程与线程的差异解析在现代编程语言中,多线程并发已经成为一种常见的编程模式,用于提高程序的性能和响应能力。然而,线程的创建和管理往往需要消耗大量的系统资源,同时在编程复杂性和错误处理上也存在一些困难。为了解决这些问题,一种轻量
对比Golang协程和线程的分析
2024-01-24

java中jvm关闭的示例分析

这篇文章给大家分享的是有关java中jvm关闭的示例分析的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。Java有哪些集合类Java中的集合主要分为四类:1、List列表:有序的,可重复的;2、Queue队列:有序
2023-06-14

Golang中线程与协程的对比分析

Golang中线程与协程的对比分析在现代的软件开发中,多线程编程是一项非常常见的任务。而随着硬件技术的发展,多核处理器已经成为了主流,因此利用多线程并行处理数据已经成为了提高程序性能的重要手段。然而,传统的多线程编程中,线程的创建、销毁和
Golang中线程与协程的对比分析
2024-02-29

PHP协程与阻塞举例分析

本篇内容介绍了“PHP协程与阻塞举例分析”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!进程、线程、协程关于进程、线程、协程,有非常详细和丰富
2023-06-17

Golang协程常见面试题代码分析

这篇文章主要介绍“Golang协程常见面试题代码分析”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Golang协程常见面试题代码分析”文章能帮助大家解决问题。交替打印奇数和偶数使用两个gorouti
2023-07-05

编程热搜

  • Python 学习之路 - Python
    一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
    Python 学习之路 - Python
  • chatgpt的中文全称是什么
    chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
    chatgpt的中文全称是什么
  • C/C++中extern函数使用详解
  • C/C++可变参数的使用
    可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
    C/C++可变参数的使用
  • css样式文件该放在哪里
  • php中数组下标必须是连续的吗
  • Python 3 教程
    Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
    Python 3 教程
  • Python pip包管理
    一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
    Python pip包管理
  • ubuntu如何重新编译内核
  • 改善Java代码之慎用java动态编译

目录