2016 LLVM 开发者大会:D. Dunbar “构建软件的新架构”
2016 LLVM Developers’ Meeting: D. Dunbar “A New Architecture for Building Software”
频道:LLVM · 时长:40:33 · 发布:2016-12-14 · 播放:7285
简介
苹果公司的 Daniel Dunbar 在 2016 LLVM 开发者大会上介绍了 llbuild,一个用于构建构建系统的框架。他认为 C 编译器与构建系统集成的传统方式限制了编译速度,并提出了一种新架构。
HN 为什么推荐
在构建系统和 C++ 编译时间的讨论中被引用,作为苹果在增量构建方面的工作以及 llbuild 背后的设计。
有一个演讲。 — HN, 2017
中文字幕节选
呃,大家好,非常感谢。我叫 Daniel Dunbar,呃,今天我要 谈谈我的一个梦想,那就是开发一种用于构建 软件的新架构。不认识我的人可能不知道,我以前在 LLVM 和 Clang 上 做了很多工作,后来我算是从项目工作中消失了,呃,而今天我要讲的 内容之一就是这段时间我在做什么。所以,先简单 介绍一下演讲概览。我想先谈谈编译时间,客户端 编译时间,然后呃,再谈谈我们今天如何构建软件,我们如何 编译软件,接着我会讲一些关于 llbuild 的内容,呃,这是 我离开后构建的东西之一,嗯,它是一个用于构建构建 系统的框架,最后再谈谈这个想法,呃,一种用于构建 软件的新架构。首先从编译时间说起,嗯,它影响着我们所有人。我们从事一个大型 C++ 项目,我想我们经常发现自己要等待编译器, 我们希望构建能更快。所以 Clang 从一开始就被设计成 一个非常快的 C 和 C++ 编译器,这是当初编写新 C 前端 的重要原因之一。Clang 试图成为快速编译器的方式是 从拥有经过调优的词法分析和语法分析实现开始,然后我们做了诸如 非常注重拥有极低开销的 O0 路径,我们努力 确保编译器在你尝试进行 O0 时不会做任何不必要的优化, 我们还做了快速指令选择之类的事情,以确保 我们只是为了快速构建而优化。我们还做了诸如 在 Clang 中完全重新设计了 PCH 实现,与 GCC 的 预编译头实现相比。Clang 的实现非常努力地 确保它从预编译头中提取的数据量最小,只提取你 实际解析源代码所需的数据。然后我们还做了一些疯狂的事情,比如 我们将汇编器集成到编译器中,这样我们就可以省去 生成汇编源代码然后再将其加载回汇编器的时间。 总的来说,这非常成功。在我们发布的第一版 Xcode 中, 包含了 Clang,我们发现 Clang 比当时我们用来 编译代码的 GCC 快大约三倍,所以快了很多。 但随着时间的推移,这一领先优势,嗯,变得 越来越小。部分原因是 GCC 本身变快了,但另一个原因 是它退步了,因为性能会随时间退化。 性能退化的原因有很多,嗯,有些原因是 因为添加了功能,与第一版 Clang 相比,呃, Clang 添加了对 C++ 的实际支持,添加了对 C++ 11 和 14 等的支持, 还有大量新的诊断信息被添加到 Clang 中,所有 这些功能让编译器好多了,但它们也可能拖慢编译器, 即使只是因为代码更多了,指令缓存 不那么满了。另一件可能发生的事是,一些最初的调优可能 被破坏。举个很傻的例子,嗯,我记得有一次和 Chris 坐在一起, 查看 Clang 诊断引擎的代码生成,也就是我们从后端 为前端发出的诊断信息生成的代码, 而 Clang 会发出很多诊断信息,所以嗯,这实际上会进入 Clang 的运行时, 我们试图重新组织代码,以便后端可以尽可能消除 不必要的加载。这实际上是一个性能提升,但这样的调优
HN 上的讨论
[LINK] 对于你所设想的东西可能太底层了,但我认为它捕捉到了你的很多想法。[LINK] 有一个演示。它侧重于用 clang 编译,但该系统更灵活。幻灯片在 [LINK] ,对应的视频在 [VIDEO] 。 — Someone, 2017-11
这像 llbuild 吗?[VIDEO] [LINK] 我记得不久前看过这个演讲,但没跟进它的进展。据我所知,它是关于使用 LLVM 作为库来消除重复工作的。我想它既适用于 C++ 也适用于 Swift。 — chubot, 2020-09
如果你在 Windows 上,VS 2015 和即将到来的 VS 2016 在编译时间方面有很多改进。[LINK] [LINK] [LINK] Apple 也在做类似的工作,针对 C 和 C++ 的增量构建,基于他们为 Swift 所做的工作 [VIDEO] 如果你不疯狂使用模板元编程、进行前向声明、只在头文件中暴露真正公开的数据、将大多数使用模板实例化,C++ 构建是可以变得可忍受的。但尤其要使用二进制库,甚至跨应用模块。不要花无尽的时间重新编译没有变化的代码。 — pjmlp, 2017-01
相关视频
- 自行车如何保持直立? · minutephysics · 3:57
- RailsConf 2014 - Sandi Metz 谈所有的小细节 · Confreaks · 38:47
- Rich Harris - 重新思考响应式 · You Gotta Love Frontend · 36:45
- Go 中的词法扫描 - Rob Pike · GoogleFOSSSydney · 51:17
- William Byrd 谈“有史以来最美丽的程序” [PWL NYC] · PapersWeLove · 1:31:05
- “用确定性模拟测试分布式系统” by Will Wilson · Strange Loop Conference · 40:20
- 🚀 TDD,哪里出错了(Ian Cooper) · DevTernity Conference · 1:03:55
- Bret Victor - 在原则中发明 · Rui Oliveira · 54:20
- 用 Clojure 的方式解决问题 - Rafal Dittwald · Clojure/north · 1:02:26
- 火线调试:系统失控时保持冷静 • Bryan Cantrill • GOTO 2017 · GOTO Conferences · 52:34
- Emery Berger 的“性能至关重要” · Strange Loop Conference · 42:15
- Acme编辑器之旅 · Russ Cox · 23:16
- 技术演讲:Linus Torvalds 谈 git · Google · 1:10:15
- Gil Tene 的 "如何不测量延迟" · Strange Loop Conference · 42:59
- Ruby Conf 12 - Gary Bernhardt 的边界 · Confreaks · 45:55
- CppCon 2016: Jason Turner “为微型计算机编写丰富代码:用C++17实现一个简单的Commodore 64游戏” · CppCon · 1:19:52