为什么我们在Netflix运行FreeBSD current – Drew Gallatin

Why We Run FreeBSD current at Netflix – Drew Gallatin

频道:OpenFest Bulgaria · 时长:40:20 · 发布:2024-02-18 · 播放:20792

在 YouTube 观看

简介

Netflix工程师Drew Gallatin解释了为什么公司在CDN上运行FreeBSD-current。他描述了团队、如何跟踪上游、他们的贡献和性能里程碑,以及一个导致20%性能退化的bug。

HN 为什么推荐

HN引用它作为Netflix保持接近-CURRENT并向上游贡献更改的案例。

他们建议既向上游贡献,又尽可能保持接近-CURRENT — HN, 2024

软件性能与优化 · Linux 与开源生态系统 · 网络与互联网基础设施

中文字幕节选

你能,哦太好了,太棒了,嗯,大家好,我们又见面了,我们准备开始继续我们的 下一场演讲,嗯,我非常高兴和激动,呃,呃,向大家介绍Drew Gallatin,他现在就在台上和我在一起,呃,Drew在 Netflix工作了八年,大概是这样,是的,呃,他的专长 是FreeBSD内核优化,而且他一直在向FreeBSD提交代码超过 25年了,所以让我们呃给呃Drew一轮 掌声,欢迎他上台,让我们听听更多关于神奇神秘 商品的事情,嘿,我在这里想先谈谈我们在Netflix如何使用FreeBSD, 然后谈谈我们为什么运行FreeBSD current,并给出一个不错的 案例研究,我称之为神奇神秘合并,这正好说明了为什么 运行current是好的,所以我在我们的CDN上工作, CDN基本上就是内容分发网络,很多公司用它来 分发你知道操作系统更新或视频游戏或电影给他们的 全球客户,呃,我们称我们的CDN为Open Connect,我们称我们的CDN 服务器为Open Connect设备,呃,我们称它们为设备,主要是因为 在很多方面它们与 你家里的路由器有更多共同点,而不是你办公室的服务器,我的意思是 我们有像A分区,你知道我们每次更新时都会重新镜像它们, 所以我们镜像B面,然后如果失败就回退到 A面,每台机器上的软件完全相同,没有 包在某些机器上而不在其他机器上,这是一个例子,呃, 我们的OCA之一,可以每秒服务400吉比特,呃,我们目前有三种不同的 OCA类型,我们有全闪存OCA,意思是全NVMe,或者较旧的是全 SATA SSD,它们服务最受欢迎的内容,这些主要位于 我们的呃数据中心,在互联网交换点,那里互联网 汇聚在一起,呃,我们也有存储OCA,它们持有你知道数百 TB的视频资产,那可能是你知道从非常 不受欢迎的标题,你知道有人每周只看一次,到甚至非常 最受欢迎的东西,我们还有我们称之为全球OCA,它提供给呃 较小的ISP,呃,帮助他们卸载呃进入他们网络的流量,所以 例如,如果你在看电影,它来自你的ISP网络内部, 他们的上行链路不受该流量的影响,所以关于 OCA的一点,呃,我们运行FreeBSD current,我会深入为什么我们运行current,其中一个 我最常被问到的问题是你运行ZFS吗,是的,我们确实运行ZFS,但我们只 为root运行它,我们不为呃我们的内容分区运行它,那是因为ZFS 有自己的缓存叫做ARC或自适应替换缓存,它与 内核页面缓存分开,这意味着为了从ZFS服务任何东西, 需要从ARC复制到页面缓存,这是低效的,所以我们运行UFS 呃,用于我们所有的内容分区,呃,我们运行nginx作为我们的web服务器, 关于我们的文件系统和其他东西,我想提到的另一件事是 与很多CDN不同,我们只是让驱动器就地失败,我们不运行任何RAID, 没有没有冗余,除了呃root分区,呃,但对于内容

HN 上的讨论

除了供应商峰会,Netflix 最近还进行了一次技术演讲,他们建议同时向上游贡献并尽可能保持接近 -CURRENT “为什么我们在 Netflix 运行 FreeBSD CURRENT”:[VIDEO] — craftkiller, 2024-05
> 或者就像我们一样,在生产环境中运行 -current。[0] 如果你是开发人员,最好针对 current 进行开发 [1],但如果我运行的是 Web、邮件、文件、数据库等服务器,那么这样做在我看来几乎没有优势。大多数人并不试图推动 >400Gbps。[0] [VIDEO] [1] [LINK] — throw0101d, 2026-03
你的评论暗示FreeBSD已是过去式,由于WiFi支持差,不再能提供“高质量网络”。我只能同意WiFi支持差这部分。但WiFi绝不是评判专为服务器设计的网络栈的标准。FreeBSD从来就不是为消费级硬件网络设计的。曾有一些“桌面发行版”,但或多或少都消亡了,而少数基于FreeBSD的“存储发行版”在FreeBSD更换ZFS上游后也转向了Linux。我这么说是因为我多年来花了很多努力在笔记本上使用FreeBSD,目前也在ThinkPad上使用15.0-CURRENT。但FreeBSD过去是、现在也是高带宽有线网络的首选。Netflix既是早期采用者,也是FreeBSD网络代码库的积极贡献者。他们不断修改FreeBSD[0]来实现炫酷的数字[1][2]。你提到的Intel设备——AX200——在我的ThinkPad上“正常”工作,已经好几个月了。该设备在一年多前就在支持硬件列表上,但实际驱动… — voytec, 2024-09
它在这里,在今年的这个演讲中。[VIDEO] 他们在 2022 年实现了 800gbps,现在似乎专注于使用 arm 的低功耗。 — miyuru, 2024-05

相关视频