CppCon 2018:H. Wright “Large-Scale Changes at Google: Lessons Learned From 5 Yrs of Mass Migrations”

CppCon 2018:H. Wright “Large-Scale Changes at Google: Lessons Learned From 5 Yrs of Mass Migrations”

频道:CppCon · 时长:1:00:16 · 发布:2018-11-12 · 播放:15759

在 YouTube 观看

简介

Hyrum Wright 分享了在谷歌庞大的 C++ 代码库中进行五年大规模代码迁移的经验教训。他涵盖了为什么要迁移、实际难度如何,以及谷歌如何持续更新核心库及其用户。

HN 为什么推荐

HN 在 monorepo 和重构讨论中引用它,作为谷歌大规模变更的精彩叙述。

来自谷歌的 Hyrum Wright 关于大规模重构的讨论在这方面非常出色。 — HN, 2024

C、C++、Rust、Go 与系统语言 · 软件实践、开源与职业

中文字幕节选

- 我叫 Hyrum Wright,你们正在参加的是 Google 的大规模代码变更。 如果这不是你想待的地方,还是留下来吧。 希望你能学到点东西。 今天是星期五,CppCon 的最后一天。 我累坏了。不知道其他人是不是也这样,但我累坏了。 我觉得这个会议本质上是一个关于电动工具的会议。 它甚至不是一个关于电动工具的会议,而是一个关于如何打造 你自己的电动工具的会议。 没人告诉你如何操作,也没人给你维护手册。 所以你回家后,造出某种 带有 17 种不同刀片、可能还附带了吹叶机的电锯装置, 因为(含糊不清)编译器会免费给你。 你回家造出这个东西, 现在你却不知道如何真正维护它并让它长期运转。 希望这次演讲,我们能稍微谈谈 在 Google,我们花了大量时间投资于大规模迁移、 工具和流程,以及诸如此类的事情,希望 你能把这些带回你的组织。 这是你在超长邮件开头会看到的标准警告。 哇。 这可不是你通常看到的警告。 好了。如果你知道 你所有的依赖都是完全安全的,你可以忽略这个演讲。 你依赖的所有代码将永远安全, 包括硬件。 过去这一年,我们发现你的硬件 也会以奇怪而有趣的方式变得脆弱, 如果你没有能力更改你的软件,就很难 缓解其中一些问题。 如果你知道这是真的,你可以回家,或者去别的地方。 如果你永远不需要更新系统的任何功能, 更新的语言、更新的编译器、更新的标准。 如果它永远不需要与其他任何东西互操作。 你不需要担心这类问题。 而且你的代码完全没有 bug。 如果你满足所有这些条件,那么这个演讲可能不适合你。 大家都还在,所以我假设(观众笑) 你们有和我们一样的问题。 我们生活在一个软件需要改变的环境中。 你的软件将会改变。 无论是发现了硬件漏洞,突然之间 你需要立刻升级编译器, 还是你使用的核心库中存在漏洞, 你的软件将会改变。 我们练习数据库备份和恢复的技术 以及诸如此类的事情,用于灾难缓解。 我们多久练习一次因为某个依赖出了问题 而立刻更改软件的技术? 这不是我们通常考虑的事情,然而能够进行这类 维护流程对我们来说将变得越来越重要, 越来越多这样的事情被发现。 几年前我看到这句话,从此一直记在心里。 我年纪越大,越不在乎事先做出正确的决定, 而更在乎能够改变它们。 我不是一个完美的工程师,别告诉我的经理们, 但我不太在乎给东西起正确的名字或做出正确的决定, 只要我以后能回去修复它就行。 能够进行大规模迁移,而大规模意味着不同的东西, 是一件重要的事情。那么这意味着什么? 在 Google,你们有些人可能知道 这些事情,我们有一个共享的单体代码库。 我们有一个非常庞大的代码库。 我们每天有,是多少来着,6万次变更,20亿行代码。 其中数亿行是C++。 这个代码库是一个包含多种语言的共享软件仓库。 在这个代码库中有一个分层所有权模型, 所以即使我们都在同一个仓库中,也不是每个人都能对仓库中的

HN 上的讨论

耦合的发生是由于其他原因,而非糟糕的契约。谷歌的Hyrum Wright关于大规模重构的讨论在这方面很棒。[VIDEO] — ted_dunning, 2024-11
参见Hyrum Wright关于谷歌大规模变更的演讲:[LINK] (CppCon2014),[VIDEO] (CppCon 2018),以及谷歌员工关于ClangMR的论文([LINK])。很棒!如果你想了解更多关于单体仓库在实践中如何运作,有几篇论文:[LINK] 和 [LINK](也值得一读:[LINK]) — svat, 2019-01
> 重构很少像移动几个文件名或符号那么简单,至少在我工作的地方是这样。虽然我们有一些自动化来帮助(并且不破坏现有消费者),但在面向服务的架构中,对于一级服务来说,这要复杂得多。这类大型重构通常还伴随着数据模型变更、性能分析等。这个工具似乎对其中部分工作非常有用,但不是全部。是的,我会称之为迁移,这绝对需要大量努力,但像这样的工具对迁移不会特别有帮助,因为这种迁移的大部分工作将是……处理所有数据和流量相关的事情。更改代码只是很小的一部分。重构在小公司甚至不算什么,因为它只是几个文件的范围。但“大规模变更”是在你拥有数百万行代码时才会出现的事情([VIDEO]),而像这样的工具对这类变更很有用。但单个LSC不会让你升职。而且rf很简洁,但以非常Go的方式,如果你熟悉[LINK]或[LINK]或clangmr或[LINK],或者谷歌之外的Semgrep和Bowler等,它并不特别令人兴奋,因为… — joshuamorton, 2021-05

相关视频