Cory Benfield - 正确构建协议库 - PyCon 2016

Cory Benfield - Building Protocol Libraries The Right Way - PyCon 2016

频道:PyCon 2016 · 时长:31:37 · 发布:2016-05-31 · 播放:14863

在 YouTube 观看

简介

Cory Benfield 在 PyCon 2016 的演讲,关于构建可广泛重用的协议库,以 Python Hyper HTTP 项目为例。他主张将协议解析与 I/O 分离。

HN 为什么推荐

HN 指出它是 sans-I/O 协议库设计的基础性论点。

关于当前各种网络协议实现方式的一些非常棒的精神食粮 — HN, 2017

Python、Ruby 与脚本语言 · 软件架构与设计 · 网络与互联网基础设施

中文字幕节选

接下来,Cory Benfield 要讲的是 如何正确地构建协议库。 让我们热烈欢迎 Cory。 [掌声] 好了,感谢大家来参加 这场大会名字最无聊的演讲 也感谢大家克服了这是今天最后一场演讲这件事。 大家好,我叫 Cory,但是——刚才那实在太惨了。 [笑声] 大家好,我叫 Cory,我是一名软件开发者,住在伦敦。 如果你想对这场演讲做实时评论 或者发推骂我,我在好几个地方都能找到。 你可以去找找看。我大部分时间都泡在网上。 我在 Hewlett Packard Enterprise 工作。 我在 Hewlett Packard Enterprise 那个偏重开源的上游团队工作。 就我而言,这意味着 我绝大部分时间都在做开源的 Python HTTP 相关工作。 这涵盖的职责范围其实相当广 但我花时间最多的是板上列出的那些东西, 你们可能比较熟悉的那些,Requests 显然就很有名。 那是我投入大量时间的一个项目, 但我也在 urllib3 上花了很多时间,它是 Requests 底层的项目。 它可能是最重要的、但你们都没听说过的 Python 项目。 除此之外,我还参与 Python hyper 项目 它其实是一组项目的集合 对 HTTP 和 HTTP/2 都很有用。 它们有一大堆相当无聊的名字。 我们稍后会稍微提到其中几个。 然后除了这些,为了赎罪,我还是 pyopenssl 的贡献者, 这个库我觉得大多数贡献者 都会很乐意看到它消失。 这场演讲的名字很糟糕,因为它原本有一个 很棒的名字,但我觉得那太具挑衅性了。 所以它原本的名字是: [笑声] 但你不能,你不能把那个印在会议手册上,对吧? 你要是把那个印在手册上,会收到愤怒的推文。 人们会觉得你在摆架子。 不过虽然这个标题极具煽动性, 它确实凸显了我想重点讲的东西, 那就是,在这场演讲中我要讲一个设计反模式 我们整个社区每次构建协议库时都会犯这个错误。 做这类演讲时很容易 让人觉得演讲者高高在上,一副“我多棒多聪明”的样子。 我不是这个意思。我很糟糕。 我比你们大多数人还笨。 我经常做错,只有一次是碰巧做对了。 所以我的成功率并不高。 那么,背景。Python HTTP 很棒。我想作为一个社区,我们都能同意 我们在 Python 里有一大堆处理 HTTP 的出色工具。 我们有非常棒的客户端库。 就算我们想假装 Requests 不是一个非常棒的客户端库, 但它确实是,而且 Python 世界里还有大量其他优秀的客户端库 在四处流传,并且构建在 Requests 之上。 比如 HTTPie,你们中有些人可能不知道, 它是 Python 社区里潜伏的伟大工具之一,但人们并不怎么用。 除此之外,我们还有很棒的纯 Python Web 服务器,比如 gunicorn, 我们有很棒的 Web 框架、异步 Web 框架

HN 上的讨论

在某些情况下,它非常实用,即使在其他(非函数式)编程语言中也是如此。例如,[LINK](及其配套演讲 [VIDEO])就当前各种网络协议的实现方式以及将协议(逻辑)与实际实现(IO)分离的好处,提供了一些非常棒的思维食粮。如果你想在 Scala 或 Haskell 等函数式语言中实现类似的分层方法,你可能还想在 Google 或 DDG 上搜索“Free monads”。 — mindcrash, 2017-12
Cory Benfield 上周在 PyCon 上的演讲“以正确的方式构建协议库”([VIDEO])提出,大量问题可以追溯到没有清晰分离实际进行 I/O 的职责与对字节进行语义理解的职责。他主要的担忧是多次重新实现像 HTTP 这样的东西,每个 I/O 框架都要实现一次(为什么 Twisted、Tornado 和 asyncio 都各自有 HTTP 实现?)。但似乎同样的问题在这里也能看到:代码的每一个部分都认为自己知道如何从网络实际获取数据,因此它自行与网络交互,导致嵌套轮询和类似的尴尬情况。如果事件处理代码的每个部分都认为自己知道如何进行网络 I/O,那么你就有了多得多的机会把网络 I/O 搞错。如果 xterm 的设计使得例如 xevents() 只负责从 X socket 获取字节,而 do_xevents() 和其他所有部分只负责处理来自缓冲区的字节,那就不会有在两个不同函数中… — geofft, 2016-06
上面的 sans-io 页面链接到了这个 PyCon 2016 演讲:Cory Benfield - 以正确的方式构建协议库 [VIDEO] — dloss, 2024-04

相关视频