Jim Keller:计算、AI、生命和意识的未来 | Lex Fridman播客 #162
Jim Keller: The Future of Computing, AI, Life, and Consciousness | Lex Fridman Podcast #162
频道:Lex Fridman · 时长:2:39:15 · 发布:2021-02-18 · 播放:1285249
简介
Lex Fridman采访芯片架构师Jim Keller,讨论计算、AI、生命和意识的未来。话题包括CPU设计、分支预测以及为什么不完美的设计常常胜出。
HN 为什么推荐
推荐为与一位既非常聪明又睿智的人进行的精彩长篇访谈,从中挖掘CPU设计的见解。
花时间听这个人似乎并不差。 — HN, 2023
AI 安全、AGI 与影响 · 计算机体系结构与CPU · 科技先驱与访谈
中文字幕节选
以下是与吉姆·凯勒的对话,他第二次做客播客。吉姆 是一位传奇的微处理器架构师,被广泛视为计算时代最伟大的 工程头脑之一。在我们这个模拟中,时空发生了奇特的扭曲, 吉姆还是乔丹·彼得森的妹夫。我们谈到了这一点,也 谈到了计算、人工智能、意识和生命。快速提一下我们的 赞助商:Athletic Greens 全营养饮品、Brooklyn 和 Sheetz、ExpressVPN 以及 Belcampo 草饲肉。点击赞助商链接获取折扣并支持 本播客。顺便说一句,让我说,吉姆在个人层面上 激励了我做自己。他在麦克风内外的话语中有些东西,或者 也许是他竟然关注了我,几乎在告诉我:你这 孩子没问题。一种拍拍肩膀的鼓励,可以决定一个头脑是 蓬勃发展,还是被世界的愤世嫉俗击垮。所以我想 这就是我对吉姆的简短感谢,也总体上感谢那些 在这档播客、我的工作和生活中给过我机会的人。如果你 喜欢这个内容,请在 YouTube 订阅、在 Apple Podcast 评价、在 Spotify 关注、 在 Patreon 支持,或在 Twitter 上联系我:alex friedman。现在,以下是我 与吉姆·凯勒的对话。在构建好的软件或硬件 系统时,理论与工程这种二分法的价值和有效性是什么? 嗯,好的设计两者都需要,我想这很明显。但 工程,你是指已知方法的实践和简化,然后 科学是追求发现人们不理解的事物,或解决 未知问题?这里的定义很有意思,但我更多是在想理论 构建模型,概括事物如何运作,而工程是 实际建造东西,务实的那种,好吧,我们有这些漂亮的模型,但 我们如何真正让事情运作起来?也许经济学是个好例子,比如 经济学家有各种模型,关于经济如何运作,以及不同政策 会产生什么效果,但然后还有实际的,我们称之为工程的部分, 比如实际部署政策。所以计算机设计几乎全是工程, 实践简化是已知信息,现在因为计算机的复杂性, 我们构建的,你知道,你可能以为,好吧,我们就写些代码,然后 验证一下,组装起来,然后你发现所有这些东西的 组合很复杂,然后你必须富有创造力,想出如何 正确完成。所以这确实经常发生,然后偶尔 会有一些大想法出现,但可能来自一个人,那个想法是在 工程领域,还是在……好吧,我给你举个例子。计算机 性能的限制之一是分支预测,所以有一大堆 关于你能多好地预测分支的想法,人们说 这有极限,是一条渐近曲线,然后有人提出了更好的 分支预测方法,好得多,他发表了一篇论文,现在世界上 每台计算机都在用它,那就是一个想法。所以构建 分支预测硬件的工程师们乐于放弃一种训练数组, 换成另一种。所以那是一个真正的想法,而分支预测是 所有软件最低层的关键问题之一。归根结底, 分支预测归结为不确定性。计算机受限于,你知道, 单线程计算机受限于两件事:分支路径的 可预测性,以及数据局部性的可预测性。所以我们现在有预测器 能很好地预测这两者。是的,所以内存,你知道,在
HN 上的讨论
直到现在我才联系起来,但Jim Keller上过两次Lex Fridman播客[1, 2],非常精彩。就创始人而言,这是一个很棒的团队。[1] [LINK] [2] [VIDEO] — WestCoastJustin, 2023-04
在他搞出该死的Zen架构(还有特斯拉AI)之后,K8看起来就相当小了。Lex对Jim的采访很棒[1],他不仅非常聪明,而且很有智慧。他不久前和Ljubisa Bajic一起创办了Tenstorrent,所以我猜这个晶圆厂和它有关。这是Tenstorrent的YouTube频道[2],上次我看的时候每个视频的观看量还不到100... Ian不久前也采访过他[3]。长话短说,如果我有在这个语境下相关的钱,我会大力投资Tenstorrent。花时间听这个人讲话似乎也不差。1a. [LINK] 1b. [VIDEO] 2. [LINK] 3. [LINK] — comboy, 2023-02
我最近养成的一个习惯是,在听长篇采访或演讲时玩一些无脑但有趣的游戏。随便举个例子,这些天我在玩 Slipways[1],但 Diablo 风格的游戏或工厂/建造类游戏也合适。同时我喜欢听像 Julia Ioffe 这样的人做的极具洞察力的采访。你可以看一千个一分钟的新闻片段,却不如听她一小时采访对普京和乌克兰战争的理解多。同样,《每日电讯报》的“Ukraine the latest”是我每天早上带孩子散步时听的大约一小时的播客。Perun 对后勤形势的分析也往往一针见血,非常有见地。我以前听 Joe Rogan 节目里有趣的人物,但 Joe 变得有点……右翼疯子。Lex Fridman 没那么疯,但也是个技巧较差的采访者。不过,他有一些出色的采访,比如对 Jim Killer[1] 的那次。你是想看另一个国家的政客说些永远不会影响你的事情的片段,还是想从当事人口中听到新技术将如何改变你的… — jiggawatts, 2022-11
恭喜发布预览!这很令人兴奋,因为自从两年前 Jim Keller 在 Lex Fridman 播客上发出号召[0]以来,我一直在等待这个公告。我很好奇围绕开源的那些暗示。显然,投入的资金和这场漂亮的产品发布决定了需要利用这些汇集的专业知识来变现。不想把底牌交给超大规模厂商。我想知道收入和许可模式最终会是什么样子。他们自己的云、为硬件制造商优化性能的专业服务、为超大规模厂商提供专业服务?好奇除了显而易见的之外,有没有人有别的想法。[0] [VIDEO] — ricopags, 2023-05
我没有资格真正理解这个,但当莱克斯第一次采访吉姆·凯勒时,吉姆基本上说关于处理器设计——“是的,如果你只是猜测和上次相同的结果,你会得到50%的速度提升。”第一次采访(那个被拙劣转述的引语所在):[LINK] 第二次采访:[VIDEO] — anonymouse008, 2021-07
相关视频
- CppCon 2019:Matt Godbolt “Compiler Explorer:幕后故事” · CppCon · 1:00:21
- Twitter和Visual Studio吐槽 · Molly Rocket · 38:19
- 算术、人口与能源——Al Bartlett 的演讲 · lXlSalemlXl · 1:14:45
- CppCon 2016: Nicholas Ormrod “Facebook中std::string的奇怪细节" · CppCon · 31:18
- 被遗忘的结构化编程艺术 - Kevlin Henney [C++ on Sea 2019] · cpponsea · 1:29:27
- LISA11 - Fork Yeah! illumos 的崛起与发展 · USENIX · 1:04:03
- 可见光子有多大? · Huygens Optics · 20:33
- CppCon 2015:Andrei Alexandrescu “std::allocator...” · CppCon · 1:12:27
- BOLTR: Juicero,为有钱怪人准备的冷压榨汁机 · AvE · 41:39
- 每个统治者死时都会犯同样的错误 · CGP Grey · 5:38
- Line Goes Up – NFT 的问题 · Folding Ideas · 2:18:23
- 全体会议:性能至关重要 - Emery Berger - CppCon 2020 · CppCon · 1:01:08
- [癫痫警告] 未优化的终端应该跑多快? · Molly Rocket · 51:03
- Refterm讲座第一部分 - 优化哲学 · Molly Rocket · 18:41
- 格雷厄姆数有多大?(特邀罗恩·格雷厄姆) · Numberphile · 8:23
- Jim Jefferies -- 枪支管制(第一部分)来自 BARE -- Netflix 特别节目 · Jim Jefferies · 7:47
- 为什么美国人不用电水壶? · Technology Connections · 24:55
- 我们最接近外星科技的东西 · Veritasium · 55:00
- Refterm v2 - 资源使用、二进制 splat、字形大小等 · Molly Rocket · 29:51
- 砖块组装 · Ancient · 12:27