Velocity 2012:Richard Cook,“复杂系统如何失败”
Velocity 2012: Richard Cook, "How Complex Systems Fail"
频道:O'Reilly · 时长:28:20 · 发布:2012-06-27 · 播放:60365
简介
Richard Cook 博士,一位医生和患者安全研究员,在 Velocity 2012 上展示了他关于复杂系统如何失败的观点。他主张为弹性而设计,而不是试图详尽处理每一种故障模式。
HN 为什么推荐
HN 上的人推荐它作为任何运行复杂系统的人的必看视频,有些人会定期重看以记住其原则。
我会每隔几个月看一次这个演讲,提醒自己这些原则。 — HN, 2020
中文字幕节选
非常感谢,嗯,很高兴来到这里,也非常感谢盛情的 邀请,嗯,这不是我通常面对的听众,嗯,所以如果有什么 地方讲得不对,请原谅,如果我们搞混了或者有点 偏差,嗯,那是因为我不是你们中的一员,呃,另一方面,呃,我们所 经历的很多事情,我想是相当共通的,嗯,而且有一种共鸣 在我和我的同事所做的这类研究,与你们所拥有的 各种经验之间,嗯,尤其是关于系统,呃,及其复杂性和 故障,这个演讲的标题是“复杂系统如何失败”,但我 不打算讲那个,因为时间不够,呃,所以我要讲 的是复杂系统如何不失败,原因是这是 我们不常关注的东西,我们很习惯于关注失败,但我们不 经常审视成功,至少在运营环境中是这样,你们中 从事运营的人知道,从来没有人会在凌晨3点打电话给你 说系统运行良好,他们对事情非常满意 所以这个演讲的大纲很简单,我要 用非常粗略的笔触告诉你们过去25年来我们在这个 领域所做的研究,我和我的同事,嗯,还有一些我的竞争者和 敌人,呃,稍微谈谈韧性,呃,还有韧性工程,但首先 我需要谈谈想象中的系统与发现的系统, 这个原则,一个基本想法,我认为你们应该把它作为 构建韧性系统工作的基本构建块, 谈谈韧性和韧性工程,那意味着什么,我们现在有 韧性的技术定义,而且我们对 韧性工程是什么样子有很好的了解,嗯,并且以一种 对话的方式进行,因为你们最感兴趣的是微调和 调整之类的事情,而我最感兴趣的是当事情变得非常非常 糟糕的时候,我是一名定期执业的麻醉师,所以我的定义是 事情变糟就是血液没有留在病人体内,嗯, 所以在这个世界里,你们工作的世界里,真正让我们惊讶的 不是有那么多事故,而是事故如此之少,你们每一个 从事运营的人都知道,都有过那种感觉, 正如乔治·C·斯科特在那部精彩的电影,呃,《奇爱博士》中说的,呃,我们感到,天哪,我们 感到死亡天使的翅膀在我们额头上扑动,这是真的,你们 每一个人都有过那种刚刚逃脱或非常接近的感觉,有时直到 事件完全结束才意识到,然后回头看,意识到 你服务器的所有电源都被踢掉了,除了那个插在 角落插座上的那个Cube tap,但这个问题 从研究的角度来看很有趣,为什么事故如此之少, 我们都知道我们本该有比现在多得多的事故,为什么 我们的事故这么少,按照我们系统开发、设计、运行和 使用及维护的方式,我们应该一直发生崩溃,我们应该有系统 一直宕机,我们只是没有那么多事故,问题是 为什么会这样,而补充问题是这对 设计、实施、运营意味着什么,或者更确切地说,应该意味着什么, 我不知道它意味着什么,但应该意味着什么,所以让我给你们一个 25年系统研究的粗略概述,我们 研究过的地方包括很多高节奏、复杂、 高后果的运营正在进行的地方,外科手术室、急诊室、 重症监护室,呃,商业航空驾驶舱、军用驾驶舱,一些军事 软件系统,嗯,我在半导体晶圆厂做过工作,这些实际上 是极其危险的地方,呃,还有一些与电力
HN 上的讨论
Richard I Cook 在 O'Reilly Velocity 大会上的配套演讲在这里:[VIDEO] 当我在运维工作时,我每隔几个月就会看一次这个演讲,以提醒自己这些原则。这些原则在列表中进行了总结,但演讲增加了一些背景。我发现这些背景对于理解这些原则如何应用很重要。 — wenc, 2020-12
> 我们或许应该做建模和形式化验证之类的事情。这很有意思。这是一个假设性的概念,还是你能分享任何个人经验,关于在哪些项目上成功做到了这一点?我提出这个问题是因为,在大多数复杂系统中,纯理论构造通常只有很窄的适用范围(AWS 和 Azure 团队都使用形式化方法 [1] 来发现 bug 并提高对关键算法的信心,但我认为他们并没有在整个系统范围内这样做。而且验证只针对抽象,而不是实际实现)。Richard Cook 做了一个关于“复杂系统如何失败”的演讲 [2],其中讨论了这一点,并主张为弹性而设计,而不是为穷尽处理所有故障模式而设计(这些故障模式是无法预测的)。设计人员常常基于某种理想化的输入概念和/或最坏情况场景进行设计。运维人员知道可能出错的地方就会出错,这就是为什么运维人员要处理偏离常规的情况。现实世界的设计会暴露提升点,揭示控制点,并支持持续维护。高可靠系统是演化出来的,而不仅仅是… — wenc, 2019-01
为了在这个讨论基础上继续,那本书中有哪些你觉得有用的亮点?我这么问是因为我读过一些系统思考的书(例如《Systemantics》),但很难应用到现实生活中。我来自一个具有系统/理论构建者人格的视角。我发现的唯一一本还算实用的系统思考书是 Peter Senge 的《第五项修炼》。我遇到过的关于系统思考最有用的短篇作品是“复杂系统如何失败”[1, 2],它讲的是为弹性而设计系统,而不是为僵化的可靠性概念而设计。[1] “复杂系统如何失败” [LINK] [2] 其配套的 O'Reilly 会议演讲 [VIDEO] — wenc, 2019-01
Richards Cooks 几年前在 velocity 上的《复杂系统如何失败》[VIDEO],以及作为其基础的论文也很方便备着 [LINK] — hedwall, 2017-02
除了我们所拥有的每一件好事都建立在失败之上。有GSM手机?宽带?调制解调器呢?个人电脑?基础化学?密码学?密码学的概念本身就是拥抱私人数据泄露的失败。你知道802.11最初是为红外线设计的吗?你还记得它有多糟糕吗?也许如果它更快地出现在野外,它会进展得更快。这就是它现在的进展方式。是的,你可能不喜欢。我时不时听到这样的想法:“当你处理关键事物时,比如医疗保健,某人的生命可能依赖于此,你承受不起失败”。但这不是真的。那些系统实际上比任何东西都更拥抱失败。谷歌可靠性工程。或者看看这个:[LINK] 在Velocity会议上有一个关于失败的精彩演讲,来自Richard Cook:[VIDEO] — rjzzleep, 2013-01
相关视频
- 乌克兰危机是西方的错吗?主讲 John Mearsheimer · The University of Chicago · 1:14:15
- 语言对外国人来说听起来是什么样的 · Sara Forsberg · 1:44
- COVID-19 疫苗:MODERNA | PFIZER/BIONTECH | ASTRAZENECA · Ninja Nerd · 43:40
- Michael Stonebraker | 大数据(至少)是四个不同的问题 · Michigan Engineering · 55:53
- 服用LSD并改变世界的人 · Veritasium · 33:39
- Erlang和Elixir的灵魂 • Sasa Juric • GOTO 2019 · GOTO Conferences · 42:02
- “用确定性模拟测试分布式系统” by Will Wilson · Strange Loop Conference · 40:20
- Velocity NY 2013: Richard Cook, "复杂自适应系统中的韧性" · O'Reilly · 19:09
- 火线调试:系统失控时保持冷静 • Bryan Cantrill • GOTO 2017 · GOTO Conferences · 52:34
- AWS re:Invent 2018: Amazon DynamoDB 深入探讨:DynamoDB 高级设计模式 (DAT401) · Amazon Web Services · 59:56
- Erlang Factory 2014 - 那是带 'B' 的 'Billion':在 WhatsApp 扩展到下一个级别 · Erlang Solutions · 49:15
- Martin Kleppmann 的 "用 Apache Samza 将数据库翻转" · Strange Loop Conference · 47:42
- 系统的语言 - Rich Hickey · ClojureTV · 1:02:49
- Google I/O 2012 - Go 并发模式 · Google for Developers · 51:27
- Literate Devops with Emacs · Howard Abrams · 28:36
- 最终一致性的冲突解决 • Martin Kleppmann • GOTO 2016 · GOTO Conferences · 51:35