第一讲:介绍
Lecture 1: Introduction
频道:MIT 6.824: Distributed Systems · 时长:1:19:35 · 发布:2020-02-06 · 播放:936108
简介
MIT 6.824 分布式系统(2020 年春季)的开篇讲座,介绍课程和分布式系统的核心挑战。它开启了一个播放列表,后续涵盖 Raft 和其他用 Go 实现的共识论文。
HN 为什么推荐
被推荐为从真实论文学习分布式系统的标准免费课程。
Martin Kleppmann(DDIA 作者) — HN, 2025
中文字幕节选
好的。我们开始吧。 这是6824分布式系统课程。 嗯,我想先简要解释一下我认为的分布式 系统是什么。嗯,你知道,其核心是一组协同工作的计算机,它们 通过网络相互通信,以完成某种一致的任务。 因此,我们在这门课上将重点关注的一些例子包括 大型网站的存储或大数据计算,比如 MapReduce。嗯,还有一些更奇特的,比如点对点文件共享。 所以,这些只是我们将要研究的一些案例研究类型的例子。 嗯,为什么所有这些都很重要,因为很多关键基础设施 都是由分布式系统构建的。 嗯,这些基础设施需要多台计算机才能完成工作,或者 本质上需要在物理上分散。 嗯,所以,人们构建这些东西的原因,首先,在我谈论 分布式系统之前,只是想提醒你,你知道,如果你 在设计一个系统,或者你在设计,你需要解决一些问题。 如果你能在单台计算机上解决它,你知道,而不需要构建一个 分布式系统,你应该那样做。 嗯,有很多很多工作可以在单台计算机上完成。 而且总是更容易。嗯,所以,分布式系统,你知道,你应该尝试 其他所有方法,然后再尝试构建分布式系统,因为它们并不 更简单。嗯,所以,人们被迫使用大量协同工作的 计算机的原因是,他们需要获得高性能。 思考这一点的方式是,他们想要实现某种并行性。 嗯,很多CPU、很多内存、很多磁盘臂并行移动。 嗯,人们构建这些东西的另一个原因是能够容忍 故障。 让两台计算机做完全相同的事情。 如果其中一台失败,你可以切换到另一台。 嗯,另一个原因是有些问题在空间上自然分散。 比如,嗯,你知道,你想进行银行间的资金转账之类的。 嗯,你知道,银行A在纽约市有这台计算机,银行B在 伦敦有这台计算机。你知道,你只需要有某种方式让它们相互通信 并合作,嗯,以便执行这个操作。 所以,有一些自然的物理原因。 所以,系统本质上是物理分布的。 人们构建这些东西的最后一个原因是,嗯,为了实现某种 安全目标。所以,通常如果有一些你不信任的代码,或者你 知道,你需要与某人交互,但你知道,他们可能不是,他们可能 是恶意的,或者他们的代码可能有错误。 嗯,所以,你不想必须信任它。 你可能想要分割计算。 所以,你知道,你的东西在那台计算机上运行,我的东西在这台 计算机上运行,它们只通过某种狭窄定义的 网络协议相互通信。 所以,我的意思是,我们可能担心,你知道,安全性。 嗯,这是通过将事物分割到多台计算机来实现的,这样它们 可以被隔离。这门课的大部分内容将关于,嗯, 性能和容错,尽管另外两个经常通过 我们将要研究的案例研究的约束方式体现出来。 嗯,你知道,所有这些分布式系统的问题都是因为,嗯,它们有 许多部分,而且这些部分并发执行。 嗯,因为它们是多台计算机,你会遇到并发编程中出现的所有问题。 所有那些复杂的交互和奇怪的依赖于时序的 东西。嗯,这就是分布式系统难以处理的部分原因。 使分布式系统难以处理的另一个原因是,因为你又有
HN 上的讨论
理解分布式系统的优质资源: - Robert Morris(莫里斯蠕虫的作者)的 MIT 课程:[VIDEO] - Martin Kleppmann(DDIA 的作者):[LINK] 如果你能学完上述内容(以及 DDIA),你将对分布式系统中的问题有扎实的理解,如共识、因果性、脑裂等。你还会对云服务有批判性的眼光,并能够阐明它们的缺点(例如:你知道 DynamoDB 二级索引的复制是最终一致的吗?这对你的应用程序会有什么影响?) — bigmutant, 2025-02
Andy Pavlo 的数据库系统导论 - [LINK] Robert Morris 的 MIT 6.824 分布式系统 - [VIDEO] 设计数据密集型应用(DDIA) - [LINK] 编写解释器 - [LINK] — avinassh, 2023-08
Andy Pavlo 的数据库系统导论 - [LINK] Robert Morris 的 MIT 6.824 分布式系统 - [VIDEO] 设计数据密集型应用(DDIA) - [LINK] 编写解释器 - [LINK] > 这些资源之所以特别,是因为它们将非常复杂的主题分解,使概念变得平易近人。作为一个新手,我从中学到了很多。 — avinassh, 2023-04
不是斯坦福的,但我很喜欢这些:MIT 6.824:分布式系统 [VIDEO] CMU 数据库学讲座 [LINK] 你基本上通过查看大量现实世界系统设计的优秀示例来学习系统。 — uyt, 2021-06
不是书也不是论文,但 MIT 在 YouTube 上发布了他们最近的分布式系统讲座[0]。还没看完,但它涉及了经得起时间考验的论文。[0] [VIDEO] — yes_but_no, 2021-02
相关视频
- 分布式系统 1.1:引言 · Martin Kleppmann · 14:35
- 01 - 课程介绍与关系模型(CMU 数据库系统 / 2019 年秋季) · CMU Database Group · 1:06:44
- Martin Kleppmann 的 "用 Apache Samza 将数据库翻转" · Strange Loop Conference · 47:42
- 前言 | MIT 微积分重温:单变量微积分 · MIT OpenCourseWare · 32:06
- 唯一不可打破的定律 · Molly Rocket · 53:25
- 如何演讲 · MIT OpenCourseWare · 1:03:42
- 1. 人类行为生物学导论 · Stanford · 57:14
- Erlang和Elixir的灵魂 • Sasa Juric • GOTO 2019 · GOTO Conferences · 42:02
- 领导力实验室:有效写作的艺术 · UChicago Social Sciences · 1:21:51
- MIT 的聚变能之路(IAP 2017)- Zach Hartwig · MIT Plasma Science and Fusion Center · 1:11:39
- 斯坦福 Sapolsky 谈美国抑郁症(完整讲座) · Stanford · 52:28
- 公正:该如何做是好?第 01 集“谋杀的道德侧面” · Harvard University · 54:56
- 第一讲 | MIT 18.06 线性代数,2005 年春季 · MIT OpenCourseWare · 39:49
- “用确定性模拟测试分布式系统” by Will Wilson · Strange Loop Conference · 40:20
- 兰迪·波许的最后一课:实现你童年的梦想 · Carnegie Mellon University · 1:16:27
- 第一讲A:Lisp概述与简介 · MIT OpenCourseWare · 1:12:55