Dmitry Vyukov — Go 调度器:用轻量级并发实现语言
Dmitry Vyukov — Go scheduler: Implementing language with lightweight concurrency
频道:Hydra · 时长:1:00:39 · 发布:2019-10-14 · 播放:47037
简介
Go 运行时贡献者 Dmitry Vyukov 深入探讨 Go 调度器,解释 goroutine 和 channel 是如何实现的。他涵盖了主要调度器组件和整体运作,然后深入细节如抢占和栈。
HN 为什么推荐
推荐作为了解 Go 的 M:N:P 调度器如何工作以及为什么这样设计(与其他方案相比)的好视频。
这个视频特别解释了 golang 的 M:N:P 与其他方案相比的设计考虑。 — HN, 2026
C、C++、Rust、Go 与系统语言 · 软件性能与优化 · 编译器、解释器与程序分析
中文字幕节选
大家好,我叫Dmitry Vyukov,是谷歌的软件工程师,今天 我会尽量不让大家午饭后睡着,通过这个演讲来介绍Go 调度器:用轻量级并发实现语言。所以我会讲如何 构建一个调度器,如何让它高效且可扩展,然后我会讲 公平性、栈和抢占。所以这是关于Go语言的,Go 语言内置支持并发,并发的主要原语 叫做goroutine。逻辑上,goroutine是一个执行线程,所以逻辑上它 和操作系统线程是一样的,在我们的绿色线程中,大部分 这个演讲的内容有些通用,很大程度上适用于 操作系统调度器、协程调度器、其他语言。希望如果你 觉得有趣和有用,即使你对Go语言没有特别的兴趣, 但也有一些Go特有的东西。首先,我要讲的是 Go语言当前实现的内容,而不是其他东西。第二, Go语言对我们施加了一些要求和约束,我们根据这些要求 做出设计决策。所以如果你有不同的 要求,你可能会得到不同的解决方案。那么让我们看看这些 要求是什么。首先,我们希望goroutine是轻量级的,更具体地说, 假设我们想在一个进程中支持多达数百万个goroutine, 显然我们希望它高效、并行和可扩展。Goroutine有 最小的API,即它们只有一个操作,就是创建一个goroutine。 现在这对我们意味着,我们没有来自用户的任何提示,比如 goroutine优先级、栈大小、交互、生命周期。如果我们需要任何 这些,我们需要自己推断。既然我们想支持每个进程数百万个 goroutine,而用户不能指定栈大小,为了同样的编程 模型,我们只有一个选择:为goroutine实现有效的无限栈。 还需要高效处理输入/输出系统调用和系统调用, 以给程序员所谓的每连接一线程编程模型,这样他们可以 写漂亮的直线代码,而不必求助于回调。所以给你一些 对Go的体验,让你理解我们试图实现什么, 让我们看一些真实的Go代码。在第一行,我们创建一个通道 并将其赋值给result变量。通道实际上只是一个FIFO队列。 在第二行,我们使用go关键字启动一个goroutine,这是我们唯一的API 用于goroutine。在goroutine内部,它会向服务器发送请求, 可能会在网络阻塞,然后我们解析响应,并将结果发送到 result通道,主goroutine接收结果并处理它。所以对我们 重要的是,从空通道接收会阻塞goroutine,然后 后续向这个通道发送会解除goroutine的阻塞。那么我们如何 实现这些goroutine呢?第一个直接的想法是尝试使用 操作系统线程/go例程。当用户启动一个goroutine时,我们创建一个 操作系统线程,它将执行goroutine的代码。所以这 会工作,因为逻辑上是一样的,但它太昂贵了,因为一个线程 至少会消耗32千字节的内存左右,因为我们需要一些内存用于 用户栈、内核栈、一些内核描述符和其他 东西。要对goroutine进行任何操作,比如创建goroutine、阻塞在
HN 上的讨论
[VIDEO] - Dmitry Vyukov — Go 调度器:用轻量级并发实现语言 这个还特别解释了 golang 的 M:N:P 与其他方案相比的设计考量,以及它试图解决的具体挑战。 — c0balt, 2026-03
我猜那是因为它们是“入门介绍”,而且多核事件循环通常是由语言运行时或某个线程池库实现的。这个值得一看:Dmitry Vyukov — Go 调度器:用轻量级并发实现语言(2019年10月14日)[VIDEO] — RossBencina, 2020-02
Go 依赖于它能跟踪所有指针,并且在需要调整栈大小时可以更新它们。早期版本的 Go 使用了分段栈,理论上如果 Zig 真的想要(需要编译器支持)也是可能的,但它们有严重的性能副作用,见 [VIDEO] — lukaslalinsky, 2025-10
相关视频
- Brian Beckman:不要害怕 Monad · jasonofthel33t · 1:07:10
- Python如何被泄漏的内部机制塑造,Armin Ronacher,Flask框架 · Видео с мероприятий {speach! · 49:55
- Rich Harris - 重新思考响应式 · You Gotta Love Frontend · 36:45
- CppCon 2015:Andrei Alexandrescu “std::allocator...” · CppCon · 1:12:27
- Go 中的词法扫描 - Rob Pike · GoogleFOSSSydney · 51:17
- William Byrd 谈“有史以来最美丽的程序” [PWL NYC] · PapersWeLove · 1:31:05
- 防止文明崩溃 / Jonathan Blow (Thekla, Inc) · DevGAMM · 1:02:41
- Emery Berger 的“性能至关重要” · Strange Loop Conference · 42:15
- 三千万行代码问题 · Molly Rocket · 1:48:55
- CppCon 2017: Matt Kulukundis “逐步设计一个快速、高效、缓存友好的哈希表” · CppCon · 59:33
- RustConf 2018 - 闭幕主题演讲 - 使用 Rust 进行游戏开发 by Catherine West · Rust Programming Language · 42:29
- Erlang Factory 2014 - 那是带 'B' 的 'Billion':在 WhatsApp 扩展到下一个级别 · Erlang Solutions · 49:15
- 古惑狼如何黑掉原版PlayStation | 战争故事 | Ars Technica · Ars Technica · 31:37
- Gil Tene 的 "如何不测量延迟" · Strange Loop Conference · 42:59
- CppCon 2016: Jason Turner “为微型计算机编写丰富代码:用C++17实现一个简单的Commodore 64游戏” · CppCon · 1:19:52
- Clasp: 使用LLVM和C++的Common Lisp用于分子元编程 · Google TechTalks · 57:37