Martin Kleppmann 的 "事务:迷思、惊喜与机遇"

"Transactions: myths, surprises and opportunities" by Martin Kleppmann

频道:Strange Loop Conference · 时长:41:08 · 发布:2015-09-27 · 播放:84773

在 YouTube 观看

简介

Martin Kleppmann 在 Strange Loop 上关于数据库事务的演讲,涵盖为何 NoSQL 放弃它们、它们以慢著称的名声,以及使可串行化事务具备性能和可扩展性的新算法。涉及一致性、线性一致性和 CAP 定理。

HN 为什么推荐

被推荐为 Kleppmann 数据系统材料的紧凑预览,包括他关于该主题的书。

我推荐观看他的这个演讲,以略微了解这本书 — HN, 2019

数据库与存储 · 分布式系统

中文字幕节选

大家好,非常感谢各位的到来,我叫 Martin Kleppmann,我想 谈谈数据库事务。当我提议这个演讲时,我考虑过 几个可能的标题,最终选定了“事务:迷思、 惊喜与机遇”,因为你知道,至少它带有一点 乐观的感觉。我实际的工作标题更像是 “事务:喜悦、挑战与痛苦”,副标题可能是“一致性 保证,你想要一致性保证, 一致性”。所以你看,研究这个主题让我有点疯了, 而且这个演讲中的禁忌知识可能也会让你发疯, 所以这是一个小实验,看看我能否让几百人发疯, 在大约40分钟内。呃,所以这个演讲源于 我为这本书做的一些研究,我已经写了很久,但至今 仍未完成。嗯,但这个演讲算是这本书第7章的摘录, 书名叫《设计数据密集型应用》,你可以在 early release 中找到第1到8章, 网址是 data intensive.net,如果你感兴趣的话。 总之,当我们谈论事务时,我应该 简要回顾一下它们的历史起源, 起源可以追溯到70年代中期,当时IBM正在构建现在 被视为第一个SQL数据库的系统R,这确实为 许多后续的关系数据库系统奠定了基础。如果你看看 现在所有常见关系数据库的风格,很多想法 可以直接追溯到系统R。实际上,事务的概念 在系统R中引入后,大概保持了接下来的 我不知道,30年左右,直到2000年代末左右,NoSQL 开始成为一大运动,然后当然不可避免的反运动 又回来了,人们称之为 no sequel、new sequel 等等,不管那是什么意思。 但实际上,这些东西与其说是关于SQL,不如说是关于事务,我 感觉如此。所以具体使用哪种查询语言和数据模型 有点相关,但真正区分这些不同技术的是 数据库的事务保证。当然,如果我们谈论 事务,我们就在谈论ACID,这已经被提及多次,但我 确实想更详细地解析一下这意味着什么,因为我们 通常认为我们知道它的意思,我们认为它意味着原子性、 一致性、隔离性和持久性,但这些词实际上是什么意思?如果你 更仔细地看,你会意识到它们有点模糊。Eric Brewer 说得很客气,他说 ACID 作为一个术语更像是助记符而非 精确的,这是一种礼貌的说法,意思是它并不真正意味着任何精确的东西,它 只是我们使用的一个营销术语。但尽管如此,还是有一定 量的定义与这些相关。让我们从后面开始, 持久性,这是最容易的。过去,持久性意味着你 将事务重做日志写入存档磁带,因为你知道,磁盘 不太可靠,所以你可以确保写入磁带的内容, 你只需将所有事务日志顺序追加到磁带上,如果你的 磁盘坏了,你可以重放磁带,从而恢复数据库的状态。但 后来磁带不再流行,我们有了磁盘,然后人们 开始将持久性定义为数据库对磁盘进行 fsync,这样你 就不会在崩溃时丢失数据。嗯,最近这又被 复制所取代,作为思考持久性的新方式。嗯,但这就是 我要说的关于持久性的全部,否则没有什么 太有趣的。那么 C,一致性部分呢?现在

HN 上的讨论

太棒了。信息密度极高,Martin对这个主题的知识量让我惊叹。我推荐观看他的这个演讲,可以一窥这本书的内容:[VIDEO] 这仅仅是其中一章的一小部分。 — redisman, 2019-05
Rich Hickey - "简单 made easy" [LINK] Rob Pike - "并发不是并行" [LINK] Uncle Bob Martin - "编程的未来" [LINK] Martin Kleppmann - "事务:神话、惊喜和机遇" [VIDEO] Simon Brown - "软件架构 vs 代码" [LINK] — geksilla, 2018-04
jepsen.io 有一张各种一致性模型的清晰图表 - [LINK] 另外,你可以在 YouTube 上找到 Martin Kleppmann 关于一致性保证的演讲,例如 [VIDEO] — gexaha, 2023-01
我的意思是,我听到你说人们这样做,这确实可以让你避免需要分布式事务。当你被困在没有事务的底层NoSQL数据库时,这是你能做的最好的事情。这就是整个“反转数据库”的想法,最终导致[1]。我认为这种使用模式很痛苦,如果你能拥有水平可扩展的事务处理,并且由于下游已提交事务而产生事件流,你可以用它来支持正确且易于推理的物化以及异步任务处理。通过事务改变状态。对状态变化做出反应。繁荣。[1] [VIDEO] — vvern, 2020-12

相关视频