Go语言中有个概念叫做goroutine, 这类似我们熟知的线程,但是更轻。

以下的程序,我们串行地去执行两次loop函数:

  1. package main
  2. import "fmt"
  3. func main() {
  4. loop()
  5. loop()
  6. }
  7. func loop() {
  8. for i := 0; i < 10; i++ {
  9. fmt.Printf("%d ", i)
  10. }
  11. }

毫无疑问,输出会是这样的:

  1. 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9

下面我们把一个loop放在一个goroutine里跑,我们可以使用关键字go来定义并启动一个goroutine,多次运行:

  1. 0 1 2 3 4 5 6 7 8 9
  2. //或有可能是下面这样
  3. 0 1 2 3 4 5 6 7 8 9 0 1 2
  4. //亦或是下面这样
  5. 0 1 2 3 4 5 6 7 8 9 0

我们反复运行上面的代码会发现结果会类似于上面这样,但是就是无法完整输出两遍0~9,明明我们主线跑了一趟,也开了一个goroutine来跑一趟啊。

原来,在goroutine还没来得及跑loop的时候,主函数已经退出了,正所谓"皮(主线程)之不存,毛(子线程)将焉附"。

main函数退出地太快了,我们要想办法阻止它过早地退出,一个办法是让main等待一下:

  1. package main
  2. import (
  3. "fmt"
  4. "time"
  5. )
  6. func main() {
  7. go loop() //启动一个goroutine
  8. loop()
  9. time.Sleep(time.Second) //停顿一秒
  10. }
  11. func loop() {
  12. for i := 0; i < 10; i++ {
  13. fmt.Printf("%d ", i)
  14. }
  15. }

这次确实输出了两趟,目的达到了。

可是采用等待的办法并不好,如果goroutine在结束的时候,告诉下主线说“Hey, 我要跑完了!”就好了, 即所谓阻塞主线的办法,回忆下我们Python里面等待所有线程执行完毕的写法:

  1. for thread in threads:
  2. thread.join()

是的,我们也需要一个类似join的东西来阻塞住主线。那就是信道

信道

信道是什么?简单说,是goroutine之间互相通讯的东西。类似我们Unix上的管道(可以在进程间传递消息), 用来goroutine之间发消息和接收消息。其实,就是在做goroutine之间的内存共享。

使用make来建立一个信道:

  1. var channel chan int = make(chan int)

那如何向信道存消息和取消息呢? 一个例子:

  1. package main
  2. import "fmt"
  3. func main() {
  4. var messages = make(chan string)
  5. go func(message string) {
  6. messages <- message //存消息
  7. }("Ping!")
  8. fmt.Println(<-messages) //取消息
  9. }

默认的,信道的存消息和取消息都是阻塞的 (叫做无缓冲的信道,不过缓冲这个概念稍后了解,先说阻塞的问题)。

也就是说, 无缓冲的信道在取消息和存消息的时候都会挂起当前的goroutine,除非另一端已经准备好。

比如以下的main函数和foo函数:

  1. package main
  2. var ch = make(chan int)
  3. func foo() {
  4. ch <- 0 //向ch中加数据,如果没有其他goroutine来取走这个数据,那么挂起foo, 直到main函数把0这个数据拿走
  5. }
  6. func main() {
  7. go foo()
  8. <-ch //从ch取数据,如果ch中还没放数据,那就挂起main线,直到foo函数中放数据为止
  9. }

那既然信道可以阻塞当前的goroutine, 那么回到上一部分「goroutine」所遇到的问题「如何让goroutine告诉主线我执行完毕了」 的问题来, 使用一个信道来告诉主线即可:

  1. package main
  2. import "fmt"
  3. var ch = make(chan int)
  4. func loop() {
  5. for i := 0; i < 10; i++ {
  6. fmt.Printf("%d ", i)
  7. }
  8. ch <- 0 //执行完毕了,发个消息
  9. }
  10. func main() {
  11. go loop()
  12. <- ch //main在此阻塞住,直到线程跑完, 取到消息.
  13. }

如果不用信道来阻塞主线的话,主线就会过早跑完,loop线都没有机会执行

其实,无缓冲的信道永远不会存储数据,只负责数据的流通,为什么这么讲呢?

  • 从无缓冲信道取数据,必须要有数据流进来才可以,否则当前线阻塞
  • 数据流入无缓冲信道, 如果没有其他goroutine来拿走这个数据,那么当前线阻塞

所以,你可以测试下,无论如何,我们测试到的无缓冲信道的大小都是0 (len(channel))

如果信道正有数据在流动,我们还要加入数据,或者信道干涩,我们一直向无数据流入的空信道取数据呢? 就会引起死锁

死锁一个死锁的例子:

  1. package main
  2. func main() {
  3. ch := make(chan int)
  4. <-ch //阻塞main goroutine,信道ch被锁
  5. }

执行这个程序你会看到Go报这样的错误:

  1. fatal error: all goroutines are asleep - deadlock!
  2. goroutine 1 [chan receive]:
  3. main.main()
  4. /Users/XXX/Go/src/main.go:6 +0x4d
  5. Process finished with exit code 2

何谓死锁? 操作系统有讲过的,所有的线程或进程都在等待资源的释放。如上的程序中, 只有一个goroutine, 所以当你向里面加数据或者存数据的话,都会锁死信道, 并且阻塞当前 goroutine, 也就是所有的goroutine(其实就main线一个)都在等待信道的开放(没人拿走数据信道是不会开放的),也就是死锁咯。

我发现死锁是一个很有意思的话题,这里有几个死锁的例子:

1.只在单一的goroutine里操作无缓冲信道,一定死锁。比如你只在main函数里操作信道:

  1. package main
  2. import "fmt"
  3. func main() {
  4. ch := make(chan int)
  5. ch <- 1 //1流入信道,堵塞当前线, 没人取走数据信道不会打开
  6. fmt.Println("This line code won`t run") //在此行执行之前Go就会报死锁
  7. }

2.如下也是一个死锁的例子:

  1. package main
  2. import "fmt"
  3. var ch1 = make(chan int)
  4. var ch2 = make(chan int)
  5. func say(s string) {
  6. fmt.Println(s)
  7. ch1 <- <- ch2 //ch1等待ch2流出的数据
  8. }
  9. func main() {
  10. go say("hello")
  11. <-ch1 //堵塞主线
  12. }

其中主线等ch1中的数据流出,ch1等ch2的数据流出,但是ch2等待数据流入,两个goroutine都在等,也就是死锁。

3.其实,总结来看,为什么会死锁?非缓冲信道上如果发生了流入无流出,或者流出无流入,也就导致了死锁。或者这样理解 Go启动的所有goroutine里的非缓冲信道一定要一个线里存数据,一个线里取数据,要成对才行 。所以下面的示例一定死锁:

  1. package main
  2. func main() {
  3. c, quit := make(chan int), make(chan int)
  4. go func() {
  5. c <- 1 //c通道的数据没有被其他goroutine读取走,堵塞当前goroutine
  6. quit <- 0 //quit始终没有办法写入数据
  7. }()
  8. <- quit //quit等待数据的写
  9. }

仔细分析的话,是由于:主线等待quit信道的数据流出,quit等待数据写入,而func被c通道堵塞,所有goroutine都在等,所以死锁。

简单来看的话,一共两个线,func线中流入c通道的数据并没有在main线中流出,肯定死锁。

但是,是否果真 所有不成对向信道存取数据的情况都是死锁?

如下是个反例:

  1. package main
  2. func main() {
  3. c := make(chan int)
  4. go func() {
  5. c <- 1
  6. }()
  7. }

程序正常退出了,很简单,并不是我们那个总结不起作用了,还是因为一个让人很囧的原因,main又没等待其它goroutine,自己先跑完了, 所以没有数据流入c信道,一共执行了一个goroutine, 并且没有发生阻塞,所以没有死锁错误。

那么死锁的解决办法呢?

最简单的,把没取走的数据取走,没放入的数据放入, 因为无缓冲信道不能承载数据,那么就赶紧拿走!

具体来讲,就死锁例子3中的情况,可以这么避免死锁:

  1. package main
  2. func main() {
  3. c, quit := make(chan int), make(chan int)
  4. go func() {
  5. c <- 1 //c通道的数据没有被其他goroutine读取走,堵塞当前goroutine
  6. quit <- 0 //quit始终没有办法写入数据
  7. }()
  8. <- c //取走c的数据
  9. <- quit //quit等待数据的写
  10. }

另一个解决办法是缓冲信道, 即设置c有一个数据的缓冲大小:

  1. c := make(chan int, 1)

这样的话,c可以缓存一个数据。也就是说,放入一个数据,c并不会挂起当前线, 再放一个才会挂起当前线直到第一个数据被其他goroutine取走, 也就是只阻塞在容量一定的时候,不达容量不阻塞。

无缓冲信道的数据进出顺序我们已经知道,无缓冲信道从不存储数据,流入的数据必须要流出才可以。

观察以下的程序:

  1. package main
  2. import "fmt"
  3. var ch chan int = make(chan int)
  4. func foo(id int) {
  5. ch <- id
  6. }
  7. func main() {
  8. //开启5个routine
  9. for i := 0; i < 5; i++ {
  10. go foo(i)
  11. }
  12. //取出信道中的数据
  13. for i := 0; i < 5; i++ {
  14. fmt.Print(<- ch)
  15. }
  16. }

们开了5个goroutine,然后又依次取数据。其实整个的执行过程细分的话,5个线的数据 依次流过信道ch, main打印之, 而宏观上我们看到的即 无缓冲信道的数据是先到先出,但是 无缓冲信道并不存储数据,只负责数据的流通

缓冲信道

终于到了这个话题了, 其实缓存信道用英文来讲更为达意: buffered channel.

缓冲这个词意思是,缓冲信道不仅可以流通数据,还可以缓存数据。它是有容量的,存入一个数据的话 , 可以先放在信道里,不必阻塞当前线而等待该数据取走。

当缓冲信道达到满的状态的时候,就会表现出阻塞了,因为这时再也不能承载更多的数据了,「你们必须把 数据拿走,才可以流入数据」

在声明一个信道的时候,我们给make以第二个参数来指明它的容量(默认为0,即无缓冲):

  1. var ch chan int = make(chan int, 2) // 写入2个元素都不会阻塞当前goroutine, 存储个数达到2的时候会阻塞

如下的例子,缓冲信道ch可以无缓冲的流入3个元素:

  1. package main
  2. func main() {
  3. ch := make(chan int, 3)
  4. ch <- 1
  5. ch <- 2
  6. ch <- 3
  7. }

如果你再试图流入一个数据的话,信道ch会阻塞main线, 报死锁。

也就是说,缓冲信道会在满容量的时候加锁。

其实,缓冲信道是先进先出的,我们可以把缓冲信道看作为一个线程安全的队列:

  1. package main
  2. import "fmt"
  3. func main() {
  4. ch := make(chan int, 3)
  5. ch <- 1
  6. ch <- 2
  7. ch <- 3
  8. fmt.Println(<-ch) //1
  9. fmt.Println(<-ch) //2
  10. fmt.Println(<-ch) //3
  11. }

信道数据读取和信道关闭你也许发现,上面的代码一个一个地去读取信道简直太费事了,Go语言允许我们使用range来读取信道:

  1. package main
  2. import "fmt"
  3. func main() {
  4. ch := make(chan int, 3)
  5. ch <- 1
  6. ch <- 2
  7. ch <- 3
  8. for v := range ch {
  9. fmt.Println(v)
  10. }
  11. }

如果你执行了上面的代码,会报死锁错误的,原因是range不等到信道关闭是不会结束读取的。也就是如果 缓冲信道干涸了,那么range就会阻塞当前goroutine, 所以死锁咯。

那么,我们试着避免这种情况,比较容易想到的是读到信道为空的时候就结束读取:

  1. package main
  2. import "fmt"
  3. func main() {
  4. ch := make(chan int, 3)
  5. ch <- 1
  6. ch <- 2
  7. ch <- 3
  8. for v := range ch {
  9. fmt.Println(v)
  10. if len(ch) <= 0 { //如果现在数据量为0,跳出循环
  11. break
  12. }
  13. }
  14. }

以上的方法是可以正常输出的,但是注意检查信道大小的方法不能在信道存取都在发生的时候用于取出所有数据,这个例子 是因为我们只在ch中存了数据,现在一个一个往外取,信道大小是递减的。

另一个方式是显式地关闭信道:

  1. package main
  2. import "fmt"
  3. func main() {
  4. ch := make(chan int, 3)
  5. ch <- 1
  6. ch <- 2
  7. ch <- 3
  8. //显式地关闭信道
  9. close(ch)
  10. for v := range ch {
  11. fmt.Println(v)
  12. }
  13. }

被关闭的信道会禁止数据流入, 是只读的。我们仍然可以从关闭的信道中取出数据,但是不能再写入数据了。

等待多gorountine的方案那好,我们回到最初的一个问题,使用信道堵塞主线,等待开出去的所有goroutine跑完。

这是一个模型,开出很多小goroutine, 它们各自跑各自的,最后跑完了向主线报告。

我们讨论如下2版本的方案:

  1. 只使用单个无缓冲信道阻塞主线
  2. 使用容量为goroutines数量的缓冲信道

对于方案1, 示例的代码大概会是这个样子:

  1. package main
  2. import "fmt"
  3. var quit chan int //只开一个信道
  4. func foo(id int) {
  5. fmt.Println(id)
  6. quit <- 0 //ok,finished
  7. }
  8. func main() {
  9. count := 1000
  10. quit = make(chan int) //无缓冲
  11. for i := 0; i < count; i++ {
  12. go foo(i)
  13. }
  14. for i := 0; i < count; i++ {
  15. <- quit
  16. }
  17. }

对于方案2,把信道换成1000的:

  1. quit = make(chan int, count) // 容量1000

其实区别仅仅在于一个是缓冲的,一个是非缓冲的。

对于这个场景而言,两者都能完成任务, 都是可以的。

  • 无缓冲的信道是一批数据一个一个的「流进流出」
  • 缓冲信道则是一个一个存储,然后一起流出去

转载:

Go编程基础—并发

goroutine,channel的更多相关文章

  1. Go语言学习笔记(七)杀手锏 Goroutine + Channel

    加 Golang学习 QQ群共同学习进步成家立业工作 ^-^ 群号:96933959 Goroutine Go语言的主要的功能在于令人简易使用的并行设计,这个方法叫做Goroutine,通过Gorou ...

  2. 使用goroutine+channel和java多线程+queue队列的方式开发各有什么优缺点?

    我感觉很多项目使用java或者c的多线程库+线程安全的queue数据结构基本上可以实现goroutine+channel开发能达到的需求,所以请问一下为什么说golang更适合并发服务端的开发呢?使用 ...

  3. 【转】关于 Goroutine Channel Select 的用法和理解

    原文:https://blog.csdn.net/jfkidear/article/details/88661693 ----------------------------------------- ...

  4. 一个Golang例子:for + goroutine + channel

    Rob Pike 在 Google I/O 2012 - Go Concurrency Patterns 里演示了一个例子(daisy chain). 视频地址:https://www.youtube ...

  5. golang并发编程goroutine+channel(一)

    go语言的设计初衷除了在不影响程序性能的情况下减少复杂度,另一个目的是在当今互联网大量运算下,如何让程序的并发性能和代码可读性达到极致.go语言的并发关键词 "go" go dos ...

  6. go14--并发concurrency,Goroutine ,channel

    package main /** 并发concurrency 很多人都是冲着 Go 大肆宣扬的高并发而忍不住跃跃欲试,但其实从 源码的解析来看,goroutine 只是由官方实现的超级“线程池”而已. ...

  7. go语言之行--golang核武器goroutine调度原理、channel详解

    一.goroutine简介 goroutine是go语言中最为NB的设计,也是其魅力所在,goroutine的本质是协程,是实现并行计算的核心.goroutine使用方式非常的简单,只需使用go关键字 ...

  8. [GO语言的并发之道] Goroutine调度原理&Channel详解

    并发(并行),一直以来都是一个编程语言里的核心主题之一,也是被开发者关注最多的话题:Go语言作为一个出道以来就自带 『高并发』光环的富二代编程语言,它的并发(并行)编程肯定是值得开发者去探究的,而Go ...

  9. Go学习——go+channel实战(转)

    转载:http://studygolang.com/articles/2423 背景 在最近开发的项目中,后端需要编写许多提供HTTP接口的API,另外技术选型相对宽松,因此选择Golang + Be ...

随机推荐

  1. ueEditor第一次赋值失败

    var ue=null; //在初始化富文本的地方 if (ue == null) { ue = new baidu.editor.ui.Editor(); ue.render('inspection ...

  2. ansible部署nginx

    1.配置免密登录 [root@localhost ansible]# vim /etc/ansible/hosts //用来配置目标主机 加入以下内容 [nginx] //目标主机组 192.168. ...

  3. Ubuntu18.04 配置Cups PDF虚拟打印机服务

    更新 sudo apt update && sudo apt upgrade -y 安装cups pdf服务 sudo apt-get install cups-pdf -y 修改配置 ...

  4. getX,getY,getScrollX,getScrollY,ScrollTo(),ScrollBy()辨析

    前言:前两天看了自定义控件,其中有一些东西我觉得有必要深入理解一下 以下图为例: getX(),getY()返回的是触摸点A相对于view的位置 getRaw(),getRawY()返回的是触摸点B相 ...

  5. Docker network整理

    一.简介 默认情况下容器与容器.容器与宿主机的网络是隔离开来的, 当你安装docker的时候,docker会创建一个桥接器docker0,通过它才让容器与容器.容器与宿主机之间通信. Docker安装 ...

  6. Linux 命令行初始化MySQL数据库

    作为一个技术纯小白,在Linux服务器初始化MySQL数据库的时候遇到了一点小问题: ​ 1.不会使用MySQL图形工具,几乎没玩过 ​ 2.客户的VPN没有开放3306端口,没法用navicat等工 ...

  7. jQuery插件 distpicker实现多次赋值

    项目里需要实现省市区联动选择功能,使用了一个jQuery插件dispicker,记录一下使用过程中遇到的问题和解决办法. 需要要实现的功能就两个:打开modal框时设置地址,点击重置按钮时重置地址 原 ...

  8. IDEA 如何自动导入(import)

    如果大家正在使用一个未曾导入(import)过的类,或者它的静态方法或者静态字段,IDEA 会给出对应的建议,只要按下 ⌥(option)和回车就可以接受建议. 但我觉得这样做仍然很麻烦,不够智能化. ...

  9. PlayJava Day029

    1.Java Reflection:Reflection(反射)是被视为动态语言的关键 反射机制允许程序在执行期借助于Reflection API取得任何类的内部信息 并能直接操作任意对象的内部属性及 ...

  10. 剑指offer笔记面试题8----二叉树的下一个节点

    题目:给定一棵二叉树和其中的一个节点,如何找出中序遍历序列的下一个节点?树中的节点除了有两个分别指向左.右子节点的指针,还有一个指向父节点的指针. 测试用例: 普通二叉树(完全二叉树,不完全二叉树). ...