经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置：技术经验 » 程序设计 » Go语言 » 查看文章
GoLang 学习笔记（四）-- 并发基础（goroutine，信道，sync.Mutex，sync.WaitGroup）
来源：cnblogs　　作者：oyishyi　　时间：2021/5/31 9:10:41　　对本文有异议

今天把 A Tour of Go 的最后章节看完。

1. goroutine（Go 程）

goroutine 是 Go 管理的一个轻量级线程。

  1. go f(x, y, z)

goroutine 会先对 f,x,y,z 求值，再把 f(x, y, z) 放到一个新的 goroutine 中。

注意：如果主线程结束，所有的 goroutine 也会结束，所以不要把 goroutine 放在最后一行，你会发现 goroutine 就像不存在一样根本不执行。

2. 信道 channels

goroutine 在同一个地址空间中运行，因此如果两个 goroutine 要用到同一个内存的时候，就需要同步。sync 包也可以干这个，但没必要，go 有自己的信道。

  1. ch = make(chan int) // 注意 chan 是个关键字不是变量名，"chan int" 合起来是一个储存 int 的信道类型

看语法大概也能直到，信道就是带类型的管道，用法如下：

  1. ch <- va // "<-" 作为符号
  2. vb := <-ch // "<-" 与 "ch" 连在一起组成 "<-ch"，中间无空格，"<-ch" 是一个值
  1. 第一条语句是把 va 的值储存在 ch 中。
  2. 第二条语句是从 ch 中把刚储存的值取出来（"<-ch" 是个值，因为很重要所以说两遍），然后赋值给 vb。

2.1 同步操作

信道之所能够进行同步，是因为信道的特性，发送和接收（就是上面两条语句）在另一端完成之前会被阻塞。比如说:

  1. func sum(x, y, z int, ch chan int) {
  2.     sum := x + y + z
  3.     ch <- sum
  4. }
  5. func main() {
  6.     ch := make(chan int)
  7.     go sum(x1, y1, z1, ch)
  8.     go sum(x2, y2, z2, ch)
  9.     var x, y = <-ch, <-ch
  10.     // do sth with x, y
  11.     // ......
  12. }

假设有这么两个 goroutine 使用了同一个信道：

  1. 主代码运行的时候，遇到第一个 goroutine，计算 x1, y1, z1, ch, sum 函数的值，挂起一个新的 goroutine 执行 sum。
  2. 遇到第二个 goroutine，计算 x2, y2, z2, ch, sum 函数的值，挂起一个新的 goroutine 执行 sum。
  3. 就在挂起第二个 goroutine 的时候，没想到第一个 sum 快如神速，已经计算完了，执行到了 ch <- sum，但是很可惜，主线程甚至还没执行到 var x, y = <-ch, <-ch 这一行，ch 没有在接收数据，于是第一个 sum 只好阻塞，等待。
  4. 主线程终于创建好了第二个 goroutine，于是从 ch 里取值并复制到 x, y ，于是开始计算第一个 <-ch，发现这不是刚好有一个 goroutine 在等我接收吗？我直接接收数据，我直接取值，我直接赋值给 x。
  5. 然后主线程到了第二个 <-ch，准备再次接收数据，然而很可惜，第二个 sum 慢如龟速，还在执行呢。没办法，主线程只好搁置，等待有 goroutine 往 ch 里发送数据。
  6. 终于第二个 sum 函数执行到了 ch <- sum这一行，有值被发送到了 ch，挂起的接受端立刻使用 <-ch 从 ch 中取值，赋值给 x。
  7. 终于 x, y 都被赋值完成，可以进行下一步的操作了。

阻塞保证了发送数据和接收数据的同步。

2.2 缓冲信道

信道每次接收数据都阻塞，但有时候我们就是想连续传多次数据，就是对完全同步没有那么大的要求，不想等第一个接收完了再传，而是可以一次接收多个数据，再传给接受者，怎么办呢？

  • 这里就可以用到缓冲信道，在创建信道的时候声明缓冲大小 make(chan int, 100) 赋予 100 个 int 大小的缓冲内存，就是说可以储存 100 个 int。

这样下面的代码就可以正常运行了：

  1. var ch = make(chan int, 2)
  2. ch <- 1
  3. ch <- 2
  4. x := <-ch
  5. y := <-ch
  6. fmt.Println(x, y)

如果不是缓冲信道的话，运行到 ch <- 2 这一步就完蛋了，因为 ch 在 ch <- 1 的时候就已经阻塞了。而接收在后面，因此会造成 DeadLock。

但是上面的代码是可以运行的，因为有 buffer 可以存两个 int，并且要在往里存第三个 int 的时候，才会阻塞。

所以其实非缓冲信道相当于 make(chan int , 0)（不是 make(chan int , 1) 哦， 1 的话是可以存一个数据的且只有在第二次存值的时候才会报错，也就是说可以在同一个 goroutine 上先存一个值再使用，虽然这没有意义（笑））

2.3 close 和 range

2.3.1 close 关闭发送端

顾名思义，close 就是关闭信道，实际上是关闭发送端。可以在接收的时候使用双赋值来得到信道的关闭信息。

  1. ch = make(chan int, 1)
  3. ch <- 1
  4. v1, ok1 := <-ch
  5. fmt.Println(v1, ok1) // "1, true"
  7. close(ch)
  8. v2, ok2 := <-ch
  9. fmt.Println(v2, ok2) // "0, false"

为什么说关闭的是信号的发送端呢?因为如下代码是可以运行的：

  1. ch := make(chan int, 1)
  3. ch <- 1
  4. close(ch) // 在 close 之前，已经往 buffered ch 里存了一个 int
  5. v1, ok1 := <-ch
  6. fmt.Println(v1, ok1) // "1, true"，buffer 里有的，依然可以收到
  8. v2, ok2 := <-ch
  9. fmt.Println(v2, ok2) // "0, false"，即使 buffer 是空的，依然不会报错，只是会得到零值

  1. 因为关闭的是发送端，所以只有发送者能够关闭信道（规定，不是语法，但你违反这个规定一般也会报错就是了），如果是接收者关闭信道了，发送者再发送一个数据到信道会触发 panic。

  2. 但是发送者关闭信道后，接收者还是能不报错的接收数据的
    ** （注意：发送端和接收端是相对于一个信道而言的，不是 goroutine 而言的，一个 goroutine 可以既有发送的信道，也有接收的信道） **

2.3.2 range 持续接收数据

对信道使用 range，会不断从信道中接收数据，直到信道关闭。

  1. func sendData(ch chan int) {
  2.     for i := 0; i < 10; i++ {
  3.         ch <- i
  4.         if i == 5 {
  5.             close(ch)
  6.             break
  7.         }
  8.     }
  9. }
  11. func main() {
  12.     ch := make(chan int, 10)
  13.     go sendData(ch)
  14.     for i := range ch {
  15.         fmt.Println(i)
  16.     }
  17.     fmt.Println("end")
  18. }
  19. // 输出：
  20. // 1
  21. // 2
  22. // 3
  23. // 4
  24. // 5
  25. // end

2.4 select

注意不要和 switch 搞混，因为两者长得很像，而且都用到 case 关键词，语法结构也像，但是 select 是用于并发的。

  1. 有时候，我们会有多个信道等待另一方发送或接收数据，而我们想等其中任意一个信道准备好了就先吧那个信道的事情处理好，这时候就需要 select 语句来帮忙了。
  2. 和 switch 一样，select 也有 default 语句，会在所有信道都没准备好的时候运行。如果不想干巴巴的什么都不输出就在那堵塞的时候可以用。
    select 的一个常见用法是在循环中使用：
  1. for {
  2.     select {
  3.         case <-ch1:
  4.             // do sth with ch1
  5.         case <-ch2:
  6.             // do sth with ch2
  7.         default:
  8.            // do sth
  9.            // i.e. fmt.Println("waiting...")
  10.            //      time.Sleep(100 * time.Millisecond)
  11.     }
  12. }

由于有 default，select 永远都不会堵塞，在其他 case 没有准备好的时候，会一直调用 default，通过 defualt 里的 time.sleep 控制调用频率。

3. sync.Mutex

如果看完以上，你应该直到信道的作用是在各个进程之间通信。但是如果我们并没有想通信，而只是想有一个共享变量，并限制 goroutine 一次只能有一个 goroutine 能访问这个变量。
这个概念叫做 mutual exclusion，简称 Mutex（互斥锁）。

正好我们有一个包 sync 包，提供了 sync.Mutex 类型，该类型有两个方法：Lock() 和 Unlock() 。
这两个方法的用法顾名思义，在一段代码前调用 Lock() 方法，在代码运行完毕后调用 Unlock() 方法。就可以保证同时只能有一个 goroutine 在访问这段代码。可以使用 defer 关键字把 Unlock() 的调用放在整段函数调用完毕时。
如果看文字没法理解的话，请参阅这里。

4. sync.WaitGroup

经常遇到这样的情况：你递归地运行一个函数，每次调用都是一个 goroutine，然后这个调用是主线程的最后一行。于是你发现代码根本不跑，因为主线程一结束就没了。为了解决这个办法：

  • 你可以用 time.Sleep，但是不优雅；
  • 你可以用 信道，但是要知道有多少个 goroutine，但是递归你怎么可能知道有多少个呢？而且也不优雅。
    那么就出现了我们的 sync.WaitGroup，非常有用。用法也很简单：

  1. wg.Add(n)，给 counter 加上 n 个计数。

  2. wg.Done() 给 counter 减少一个计数，一般是在 goroutine 函数中使用 defer 优雅处理。

  3. wg.Wait()，在主线程中调用，在 counter 变为 0 之前都会阻塞。
    坑也很多：

  4. 使用 var wg sync.WaitGroup 后 wg 不是指针，传入函数参数的时候要传入 &wg。但是传入后在递归的再次调用该函数的时候，由于已经是 *sync.WaitGroup 类型，就不能再加 & 了。

    1. func recursion(depth int, wg *sync.WaitGroup) {
    2.     if depth == 0 {
    3.         return
    4.     }
    5.     for i := 0; i < 10; i++ {
    6.         go recursion(depth - 1, wg) // 不能加 &
    7.     }
    8. }
    9. func main() {
    10.     depth := 10
    11.     var wg sync.WaitGroup
    12.     go recursion(depth, &wg) // 记得加 &
    13. }

  5. wg.Add() 和 wg.Done() 的用法：拿上面的代码做例子，你是不是以为应该这么写：

    1. func recursion(depth int, wg *sync.WaitGroup) {
    2.     
    3.     wg.Add(1) // 每次调用都是一个新的 goroutine，所以加一个 counter
    4.     defer wg.Done() // 调用完毕就减少一个 counter
    5.     
    6.     if depth == 0 {
    7.         return
    8.     }
    9.     for i := 0; i < 10; i++ {
    10.         go recursion(depth - 1, wg)
    11.     }
    12. }
    13. func main() {
    14.     depth := 10
    15.     var wg sync.WaitGroup
    16.     go recursion(depth, &wg)
    17.     wg.Wait()
    18. }
    • 当然大错特错，错炸了。你发现运行错误，你发现很多博客的用法都是在主线程中使用 wait.Add()，你以为只能在主线程中使用，然后你就纳闷了，这样有什么意义，那还怎么知道递归了多少次？当然，wait.Add() 肯定是要在 goroutine 中用的，全是网上搜的博客误人子弟（我就被他们坑了好几个小时，真的坑）。

  6. 你的错误在于对这里 goroutine 的数量的判断错误，来看看正确答案，其实只改了三行：

    1. func recursion(depth int, wg *sync.WaitGroup) {
    2.     
    3.     
    4.     defer wg.Done() // 调用完毕就减少一个 counter
    5.     
    6.     if depth == 0 {
    7.         return
    8.     }
    9.     for i := 0; i < 10; i++ {
    10.         wg.Add(1) // go 关键字在这里，goroutine 是在这里生成的，当然要在这里加
    11.         go recursion(depth - 1, wg)
    12.     }
    13. }
    14. func main() {
    15.     depth := 10
    16.     var wg sync.WaitGroup
    17.     wg.add(1) // 每次看到 go 关键字之前，就应该调用 wg.Add()
    18.     go recursion(depth, &wg)
    19.     wg.Wait()
    20. }
    • goroutine 是怎么产生的，是通过 go 关键字产生的，那么问题就好解决了，刚刚那段代码的问题在于，每次调用都执行了 10 次 go，产生了 10 个 goroutine，但是却只加了一个 counter。以及主线程其实也有一个 goroutine，但是你却没有把这个 counter 加上去。
    • 这里还挺难的，因为不同递归函数有不同的产生 goroutine 的方式，每次都要去理清递归了几次，在哪里加，说实话，挺难的。
    • 但是我总结了一个方法，那就是一旦看到 go 关键字，那么在这之前就需要调用 wg.Add()。希望这方法能够帮助你更快的理清递归中的并发数量

  7. 试试更改上面的代码，但是代码依旧正常运行：

    1. func recursion(depth int, wg *sync.WaitGroup) {
    2.     
    3.     
    4.     defer wg.Done()
    5.     
    6.     if depth == 0 {
    7.         return
    8.     }
    9.     
    10.     wg.Add(10) // 我提前知道这里有 10 个 goroutine，就不在循环里加了
    11.     for i := 0; i < 10; i++ {
    12.         go recursion(depth - 1, wg)
    13.     }
    14. }
    15. func main() {
    16.     depth := 10
    17.     var wg sync.WaitGroup
    18.     // wg.Add(1) ，这一次这里没有 go 关键字，没有 goroutine 产生，所以不用加了
    19.     recursion(depth, &wg) // 这一次，第一次调用我故意不加 go 关键字，所以这里不用调用 `wg.Add(1)`
    20.     wg.Wait()
    21. }

原文链接：http://www.cnblogs.com/oyishyi/p/14816799.html

 友情链接：直通硅谷 　点职佳 　北美留学生论坛

Go语言热门文章

  • Golang从文件服务器获取图片显示到客户端
  • 谈谈Go语言中的内存重排
  • Golang&nbsp;模块引入及表格读写业务快速实现示例
  • 创建并使用https证书
  • golang的reflection（转）
  • TICK技术栈（一）TICK技术栈介绍
  • beego解读Cache之MemoryCache
  • go语言reflect包最佳实践之struct操作（遍历、赋值与方法调用）
  • golang中gin框架接入jwt使用token验证身份
  • Golang解析、验证、修改URL之Host、Port、Path

    • Go语言推荐文章

  • Go 互斥锁 Mutex 源码分析(二)
  • golang对遍历目录操作的优化
  • 美团VS饿了么，到底谁更胜一筹？
  • 解码 xsync 的 map 实现
  • [golang]在Gin框架中使用JWT鉴权
  • Golang 依赖注入设计哲学｜12.6K &#127775; 的依赖注入库 wire
  • 这么简单的问题都不会，那还面试什么！？
  • golang select 和外层的 for 搭配
  • Go语言的100个错误使用场景（61-68）｜并发实践
  • 实战：如何优雅的从 Skywalking 切换到 OpenTelemetry

    • 本站QQ群：前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

    W3xue 的所有内容仅供测试，对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
    关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接（目前9元/月）请联系QQ：27243702 沸活量
    皖ICP备17017327号-2　皖公网安备34020702000426号