concurrency - 什么会导致代码阻塞？

Question

因为 go 是一种并发程序语言，所以使用 channel (我几乎所有代码都使用它)或其他同步 goroutine .

我也知道去使用调度器来调度goroutine这意味着你应该调用scheduler ( channel 操作、runtime.goSche 或其他)在每个 goroutine 中并保证它会被执行。

以上是我目前在go上的全部限定|我用它们来设计我的代码。

但我也发现它会在我的代码中发生代码阻塞。而且很难找到阻塞的原因(即使使用GDB)。

我错过了什么吗？

还有什么可能导致阻塞？

我应该注意哪些事项？

[编辑]:好的，因为我项目的代码有点大。我决定不显示标准 go代码，只是可能导致代码阻塞的部分的一般概念。以下是我项目中文件传输模块的一些代码片段:

func(c *client)listenRead() {
    for {
        _ := websocket.JSON.Receive(c.ws, &package)
        switch package.Op {
        case fileUpld:
            c.fileMan.store <- package.Body
        case fileDownld:
            c.fileMan.downld <- package.Body
        case c.xxx:
            ...
        default:
            // bad package.
        }
    }
}

一个client监听并通过websocket接收来自另一个client的消息，然后根据package转发包裹的 Op字段到不同的 handler，例如 fileManager如下所示。

func(fm *fileManager) fileRouter() {
    for {
        select {
            case fs := <-fm.fileUpld:
                if window < filesize {
                    f.Write(fs.content) // client A write to file
                    window += fs.contSize
                } else {
                    f.close()           // close file
                }
            case fd := fm.downld:
                go fm.downldFile(fd)
        }
    }
}

A fileManger chan fileUpld 时可以接收文件片段并存储到服务器获取从 client 发送的数据.它可以在收到 request 时下载文件来自客户端，它将生成一个 goroutine完成工作，如下所示:

func(fm *fileManager) downldFile(fd) {
    f := getFile(fd)                     // get the file that client A write
    b := make([]byte, SeqLength)
    for {
        if convergence < window {
            f.Read(b)

            // wrap 'b' to package 'p', for send

            fm.server.send <- p   // send to client B
        } else if window < fileSize {
            runtime.Goshed()
        } else {
            // download done.
            fm.done <- xx
            return
        }
    }
}

我的文件传输模块的主要思想是客户端A想要向 客户端B发送文件，但不想等待 acceptance来自 client B，这意味着它会先存储到服务器，然后 client B会从服务器下载文件。但是有可能 client B 下载文件，而 client A 上传文件。所以上传和下载之间需要同步。

我使用三个变量来实现:窗口、收敛、文件大小。当client A上传(写入)文件时，window会增加它写入的字节数。而当client B下载(读取)文件时，convergence会增加它读取的字节数。 Write只发生 window < filesize同时 read只发生 convergence < window .就像:

+-----------+---------------+--------------+
|############||||||||||||||||              |
+-----------+---------------+--------------+
            ^               ^              ^
            |               |              |
       convergence        window        filesize

我知道这会导致数据竞争，但它也保证了 read不会阅读 write 的内容还没有写。(顺便说一句:我没有使用 channel 来实现它的解决方案。)

当我尝试同时上传和下载时发生代码阻塞(我降低了客户端A的速度来实现它)。但是当我设置 GOMAXPROCS 时没有问题到 2.

Answer 1

您应该考虑一个垃圾收集器，它将暂停您的整个程序，即所谓的“停止世界”。在内存消耗大的大型应用程序上，GC 可能会“停止世界”长达 10 秒，但这是最坏的情况。这是关于 Go 中的 GC 的一个很好的答案:What kind of Garbage Collection does Go use?