Dmitry Vyukov — Go 调度器:用轻量级并发实现语言

Dmitry Vyukov — Go scheduler: Implementing language with lightweight concurrency

频道:Hydra · 时长:1:00:39 · 发布:2019-10-14 · 播放:47037

在 YouTube 观看

简介

Go 运行时贡献者 Dmitry Vyukov 深入探讨 Go 调度器,解释 goroutine 和 channel 是如何实现的。他涵盖了主要调度器组件和整体运作,然后深入细节如抢占和栈。

HN 为什么推荐

推荐作为了解 Go 的 M:N:P 调度器如何工作以及为什么这样设计(与其他方案相比)的好视频。

这个视频特别解释了 golang 的 M:N:P 与其他方案相比的设计考虑。 — HN, 2026

C、C++、Rust、Go 与系统语言 · 软件性能与优化 · 编译器、解释器与程序分析

中文字幕节选

大家好,我叫Dmitry Vyukov,是谷歌的软件工程师,今天 我会尽量不让大家午饭后睡着,通过这个演讲来介绍Go 调度器:用轻量级并发实现语言。所以我会讲如何 构建一个调度器,如何让它高效且可扩展,然后我会讲 公平性、栈和抢占。所以这是关于Go语言的,Go 语言内置支持并发,并发的主要原语 叫做goroutine。逻辑上,goroutine是一个执行线程,所以逻辑上它 和操作系统线程是一样的,在我们的绿色线程中,大部分 这个演讲的内容有些通用,很大程度上适用于 操作系统调度器、协程调度器、其他语言。希望如果你 觉得有趣和有用,即使你对Go语言没有特别的兴趣, 但也有一些Go特有的东西。首先,我要讲的是 Go语言当前实现的内容,而不是其他东西。第二, Go语言对我们施加了一些要求和约束,我们根据这些要求 做出设计决策。所以如果你有不同的 要求,你可能会得到不同的解决方案。那么让我们看看这些 要求是什么。首先,我们希望goroutine是轻量级的,更具体地说, 假设我们想在一个进程中支持多达数百万个goroutine, 显然我们希望它高效、并行和可扩展。Goroutine有 最小的API,即它们只有一个操作,就是创建一个goroutine。 现在这对我们意味着,我们没有来自用户的任何提示,比如 goroutine优先级、栈大小、交互、生命周期。如果我们需要任何 这些,我们需要自己推断。既然我们想支持每个进程数百万个 goroutine,而用户不能指定栈大小,为了同样的编程 模型,我们只有一个选择:为goroutine实现有效的无限栈。 还需要高效处理输入/输出系统调用和系统调用, 以给程序员所谓的每连接一线程编程模型,这样他们可以 写漂亮的直线代码,而不必求助于回调。所以给你一些 对Go的体验,让你理解我们试图实现什么, 让我们看一些真实的Go代码。在第一行,我们创建一个通道 并将其赋值给result变量。通道实际上只是一个FIFO队列。 在第二行,我们使用go关键字启动一个goroutine,这是我们唯一的API 用于goroutine。在goroutine内部,它会向服务器发送请求, 可能会在网络阻塞,然后我们解析响应,并将结果发送到 result通道,主goroutine接收结果并处理它。所以对我们 重要的是,从空通道接收会阻塞goroutine,然后 后续向这个通道发送会解除goroutine的阻塞。那么我们如何 实现这些goroutine呢?第一个直接的想法是尝试使用 操作系统线程/go例程。当用户启动一个goroutine时,我们创建一个 操作系统线程,它将执行goroutine的代码。所以这 会工作,因为逻辑上是一样的,但它太昂贵了,因为一个线程 至少会消耗32千字节的内存左右,因为我们需要一些内存用于 用户栈、内核栈、一些内核描述符和其他 东西。要对goroutine进行任何操作,比如创建goroutine、阻塞在

HN 上的讨论

[VIDEO] - Dmitry Vyukov — Go 调度器:用轻量级并发实现语言 这个还特别解释了 golang 的 M:N:P 与其他方案相比的设计考量,以及它试图解决的具体挑战。 — c0balt, 2026-03
我猜那是因为它们是“入门介绍”,而且多核事件循环通常是由语言运行时或某个线程池库实现的。这个值得一看:Dmitry Vyukov — Go 调度器:用轻量级并发实现语言(2019年10月14日)[VIDEO] — RossBencina, 2020-02
Go 依赖于它能跟踪所有指针,并且在需要调整栈大小时可以更新它们。早期版本的 Go 使用了分段栈,理论上如果 Zig 真的想要(需要编译器支持)也是可能的,但它们有严重的性能副作用,见 [VIDEO] — lukaslalinsky, 2025-10

相关视频