深入浅出Golang的协程池设计

Posted Golang语言社区

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了深入浅出Golang的协程池设计相关的知识,希望对你有一定的参考价值。

使用Go语言实现并发的协程调度池阉割版,本文主要介绍协程池的基本设计思路,目的为深入浅出快速了解协程池工作原理,与真实的企业协程池还有很大差距,本文仅供学习参考。


一、何为并发,Go又是如何实现并发?

深入浅出Golang的协程池设计


深入浅出Golang的协程池设计



并行的好处:

  1. 同一时刻可以处理多个事务

  1. 更加节省时间,效率更高


具有并行处理能力的程序我们称之为“并发程序”

并发程序的处理能力优势体现在哪里?

深入浅出Golang的协程池设计



二、Go语言如何实现并发?


 1package main
2
3import "fmt"
4import "time"
5
6func go_worker(name string) {
7        for i := 0; i < 10; i++ {
8                fmt.Println("我是一个go协程, 我的名字是 ", name, "----")
9                time.Sleep(1 * time.Second)
10        }
11        fmt.Println(name, " 执行完毕!")
12}
13
14func main() {
15        go go_worker("小黑")  //创建一个goroutine协程去执行 go_worker("小黑")
16        go go_worker("小白")  //创建一个goroutine协程去执行 go_worker("小白")
17
18        //防止main函数执行完毕,程序退出
19        for {
20                time.Sleep(1 * time.Second)
21        }
22}


那么多个goroutine之前如何通信呢?


 1package main
2
3import "fmt"
4
5func worker(c chan int) {
6        //从channel中去读数据
7        num := <-c
8        fmt.Println("foo recv channel ", num)
9}
10
11func main() {
12        //创建一个channel
13        c := make(chan int)
14
15        go worker(c)
16
17        //main协程 向一个channel中写数据
18        c <- 1
19
20        fmt.Println("send 1 -> channel over")
21}


三、协程池的设计思路

为什么需要协程池?

虽然go语言在调度Goroutine已经优化的非常完成,并且Goroutine作为轻量级执行流程,也不需要CPU调度器的切换,我们一般在使用的时候,如果想处理一个分支流程,直接go一下即可。

但是,如果无休止的开辟Goroutine依然会出现高频率的调度Groutine,那么依然会浪费很多上下文切换的资源,导致做无用功。所以设计一个Goroutine池限制Goroutine的开辟个数在大型并发场景还是必要的。

四、快速实现并发协程通讯池

深入浅出Golang的协程池设计

  1package main
 2
 3import (
 4        "fmt"
 5        "time"
 6)
 7
 8/* 有关Task任务相关定义及操作 */
 9//定义任务Task类型,每一个任务Task都可以抽象成一个函数
10type Task struct {
11        f func() error //一个无参的函数类型
12}
13
14//通过NewTask来创建一个Task
15func NewTask(f func() error) *Task
 {
16        t := Task{
17                f: f,
18        }
19
20        return &t
21}
22
23//执行Task任务的方法
24func (t *Task) Execute() {
25        t.f() //调用任务所绑定的函数
26}
27
28/* 有关协程池的定义及操作 */
29//定义池类型
30type Pool struct {
31        //对外接收Task的入口
32        EntryChannel chan *Task
33
34        //协程池最大worker数量,限定Goroutine的个数
35        worker_num int
36
37        //协程池内部的任务就绪队列
38        JobsChannel chan *Task
39}
40
41//创建一个协程池
42func NewPool(cap int) *Pool {
43        p := Pool{
44                EntryChannel: make(chan *Task),
45                worker_num:   cap,
46                JobsChannel:  make(chan *Task),
47        }
48
49        return &p
50}
51
52//协程池创建一个worker并且开始工作
53func (p *Pool) worker(work_ID int) {
54        //worker不断的从JobsChannel内部任务队列中拿任务
55        for task := range p.JobsChannel {
56                //如果拿到任务,则执行task任务
57                task.Execute()
58                fmt.Println("worker ID ", work_ID, " 执行完毕任务")
59        }
60}
61
62//让协程池Pool开始工作
63func (p *Pool) Run() {
64        //1,首先根据协程池的worker数量限定,开启固定数量的Worker,
65        //  每一个Worker用一个Goroutine承载
66        for i := 0; i < p.worker_num; i++ {
67                go p.worker(i)
68        }
69
70        //2, 从EntryChannel协程池入口取外界传递过来的任务
71        //   并且将任务送进JobsChannel中
72        for task := range p.EntryChannel {
73                p.JobsChannel <- task
74        }
75
76        //3, 执行完毕需要关闭JobsChannel
77        close(p.JobsChannel)
78
79        //4, 执行完毕需要关闭EntryChannel
80        close(p.EntryChannel)
81}
82
83//主函数
84func main() {
85        //创建一个Task
86        t := NewTask(func() error {
87                fmt.Println(time.Now())
88                return nil
89        })
90
91        //创建一个协程池,最大开启3个协程worker
92        p := NewPool(3)
93
94        //开一个协程 不断的向 Pool 输送打印一条时间的task任务
95        go func() {
96                for {
97                        p.EntryChannel <- t
98                }
99        }()
100
101        //启动协程池p
102        p.Run()
103
104}



版权申明:内容来源网络,版权归原创者所有。除非无法确认,我们都会标明作者及出处,如有侵权烦请告知,我们会立即删除并表示歉意。谢谢。

深入浅出Golang的协程池设计

Golang语言社区

ID:Golangweb

 www.GolangWeb.com

游戏服务器架构丨分布式技术丨大数据丨游戏算法学习


以上是关于深入浅出Golang的协程池设计的主要内容,如果未能解决你的问题,请参考以下文章

[Golang]实现一个带有等待和超时功能的协程池 - 类似Java中的ExecutorService接口实现

[Golang]实现一个带有等待和超时功能的协程池 - 类似Java中的ExecutorService接口实现

fasthttp中的协程池实现

Go协程与协程池

Go协程与协程池

golang协程调度模式解密