在 Zig 中用异步 I/O 建模数据并发 - RedisConf 2020
Modeling Data Concurrency w/ Asynchronous I/O in Zig - RedisConf 2020
频道:Redis · 时长:49:19 · 发布:2020-06-18 · 播放:10936
简介
Zig 创造者 Andrew Kelley 在 RedisConf 2020 的演讲,讲述如何在 Zig 中用异步 I/O 建模数据流。它解释了 Zig 的 async/await 如何避免函数着色,Loris Cro 演示了 OkRedis,一个零分配的 Redis 客户端。
HN 为什么推荐
HN 推荐它,认为它最清晰地解释了 Zig 如何实现无色 async/await。
我强烈推荐观看 Andrew Kelley 的视频 — HN, 2021
中文字幕节选
大家好,我是 Andrew Kelley,Zig 编程语言的创造者,我今天 在这里和大家聊聊 Zig 如何让你表达 你试图用代码解决的问题中固有的并发性, 使用 async await。让我们直接开始吧。 那么什么是 async await?除了流行术语之外,我会确切地告诉你它是什么。 它是一种语言级别的语法,让你可以同时启动多个操作, 然后选择性地等待其中一些完成,再继续处理数据。 所以,如果我用可视化的方式展示, 你可以把你的软件想象成一个管道,你可以把每个 小形状想象成你需要执行的小操作, 以便处理数据,然后你最终会在这里得到最终结果, 用这个卷轴表示。所以以 Redis 为例,这些小形状中的任何一个 都可能是一个 Redis 查询,或者可能是不同的数据库查询, 或者可能是外部 API 获取,或者可能是读取配置文件,或者可能 是使用第三方 API。关键是,这基本上就是所有软件 都在做的事情,某种形式。箭头只是中间的小处理, 然后你得到结果。所以这是我喜欢思考软件的方式。 如果我们试图从给定问题中榨取最大性能, 你想尽可能多地并行同时进行。 async await 帮助你以这种方式建模代码, 但它带来了一个新问题,你以前没有的。 当你尝试使用 async await 时,还有 Bob Nystrom 的那篇著名博客文章《你的函数是什么颜色?》,它很好地 解释了当你尝试使用 async await 时函数着色带来的问题。 所以我会在几种不同的编程语言中展示这个问题。 这里是一些 Rust 代码,我通过搜索 Rust async await 并查看文档中出现的第一个例子找到的。 你可以看到这里在这个函数前面有一个 async 关键字, 它不能再像普通函数那样被调用,你可以看到 在下面调用它的地方,我们必须使用 .await 来获取值。 同样地,这个函数 bar 也不是一个普通函数, 因为它是一个某种 future,我想是的,它 返回这个 async future,所以这个函数 bar 也不能 像普通函数那样被调用。如果你想获取输出值, 你必须使用 await。 好的,这里是 Nim,我通过搜索 Nim 异步并查看 文档中的第一个例子找到的。所以这是同样的问题。这里是一个示例 代码,我们调用 socket.receive,我们得到一个 future 值,它不是函数调用的结果, 为了获取实际结果,我们必须使用回调函数, 然后我们使用 future.read 来获取 这个异步函数调用的结果。这是与 Rust 相同形式的 函数着色。好的,接下来是什么?JavaScript,同样的情况。 呃,我们来了。我甚至不太理解这个例子,它真的很 冗长,但关键是这就是你的代码的样子。看起来你做了一个 异步的事情,然后你必须使用 .then,你有一个回调函数,或者我 猜如果你使用这个 catch 东西,看看这怎么不是实际
HN 上的讨论
在看到 Zig 如何实现无色的 async/await 之后,我真的无法认同这个前提:[LINK] 我强烈推荐观看 Andrew Kelley 关于这个话题的视频(链接在那篇文章里):[VIDEO] — kbd, 2021-04
我最近用 Zig 的 async/await 写了一个基于 io_uring 的 IO 抽象。用它可以这样完成 write()/fsync()/read()([LINK]): const offset: u64 = 0; const bytes_written = try io.write(fd, buffer_write[0..], offset); try io.fsync(fd); const bytes_read = try io.read(fd, buffer_read[0..], offset); 其他同步函数也可以用这种异步 IO 完成代码,以同步的风格来写(就像这段代码展示的那样),同时仍然获得 io_uring 的零系统调用和异步性能。它底层实际上是把 SQE 填入 io_uring 的提交队列环形缓冲区,然后再从 io_uring 的完成队列环形缓冲区读取完成事件,所… — jorangreef, 2021-02
Zig 中有一种有趣的做法,通过显式地踢出调用帧来实现无色的异步。[VIDEO] — bvrmn, 2020-05
> 那些本应被固定(如果没被固定就可能行为异常)的代码,看起来和其他代码没什么两样。async/await 也是如此。让你继续运行在同一个原生线程上,这个决定权在调度器手里。 > Java 并不是被定位成一门高层、高抽象的语言,而且据我所知,它的用户社区也不是这样的。 恕我难以苟同。它的目标是在生产力、可观测性和性能之间取得良好的平衡。从 JIT 到 GC,每一个选择都是为了在提升常见场景性能的同时兼顾生产力,而不是通过增加细粒度控制来提升性能。有些情况下这做不到。基本类型就是其中之一,而且,25 年过去了,我们是在“扩展”基本类型,而不是找到某种自动实现最优内存布局的方法。 > 它一直都被宣传为 C++ 的更安全替代品——很像 Rust。 我觉得你搞错了,而且无论如何,这肯定不是我们的立场。Java 的设计目标是在生产力、可观测性和性能之间取得良好平衡,除非情况特殊,它倾向于用高抽象来… — pron, 2020-05
相关视频
- ZFS:文件系统的终极篇章 第一部分 · Deirdré Straughan · 1:01:26
- 用 Zig 编写 Wayland 合成器 - Isaac Freund · Zig SHOWTIME · 42:19
- TigerStyle!(或者如何在更短时间内设计更安全的系统) by Joran Dirk Greef · TigerBeetle · 1:01:59
- 寻找缺失的忆阻器 - R. Stanley Williams · The Qualcomm Institute · 47:52
- Matplotlib 更好的默认颜色映射 | SciPy 2015 | Nathaniel Smith 和 Stéfan van der Walt · Enthought · 19:08
- Python如何被泄漏的内部机制塑造,Armin Ronacher,Flask框架 · Видео с мероприятий {speach! · 49:55
- CppCon 2015:Andrei Alexandrescu “std::allocator...” · CppCon · 1:12:27
- Go 中的词法扫描 - Rob Pike · GoogleFOSSSydney · 51:17
- 为什么函数式编程没有成为主流?—— Richard Feldman · Metosin · 46:09
- 也许不 - Rich Hickey · ClojureTV · 1:03:28
- APL中的康威生命游戏 · Dyalog · 7:47
- 讲座 1A | MIT 6.001 计算机程序的构造和解释,1986 · MIT OpenCourseWare · 1:12:55
- Crockford 谈 JavaScript - 第一卷:早年 · YUI Library · 1:42:08
- 培育语言,作者:Guy Steele · Bill Pugh · 53:31
- CppCon 2017: Matt Kulukundis “逐步设计一个快速、高效、缓存友好的哈希表” · CppCon · 59:33
- 高效程序 - Clojure 10年 - Rich Hickey · ClojureTV · 1:14:51