NYCBSDCon 2014:用 FreeBSD 服务三分之一的互联网

NYCBSDCon 2014: Serving one-third of the Internet via FreeBSD

频道:BSDTV · 时长:1:01:39 · 发布:2014-04-06 · 播放:13621

在 YouTube 观看

简介

Netflix 的 Scott Long 在 NYCBSDCon 2014 上介绍了 OpenConnect 内容分发网络的架构。他解释了为什么 Netflix 在其设备上运行 FreeBSD 10,以及未来会怎样。

HN 为什么推荐

被引用为 Netflix 为什么在其 CDN 设备上使用 FreeBSD 和 UFS 而不是 ZFS 的主要来源,以及其 GPL 理由。

实际上,事实证明他们并不真正需要 ZFS 的大部分功能。 — HN, 2014

分布式系统 · Linux 与开源生态系统 · 网络与互联网基础设施

HN 上的讨论

很确定它仍然是 UFS+J。他们过去提到过,ZFS 的好处并不真正适用于 CDN 盒子:如果驱动器坏了,它只是从本地缓存中移除,文件会在设备下次从其上游源刷新时根据需要重新下载/重新分发到剩余的缓存驱动器上。此外,据我所知,ZFS 预取在某些情况下实际上性能更差——或者至少没有提供任何好处——因为它无法真正预测用户视频片段请求的 I/O 模式。额外参考:- [LINK](“……但缓存是徒劳的。”)- [VIDEO] — m11r, 2019-02
Netflix 通过 FreeBSD 提供所有视频流媒体内容,这占所有互联网流量的 37%。[LINK] 他们还为 FreeBSD 核心做贡献。这并不像某些人似乎想指出的那样只是一个“设备”。[LINK] [LINK] [VIDEO] 此外,我遇到的一位曾在 Yahoo 工作的人告诉我,截至两年前,Yahoo 仍有约 25% 运行在 FreeBSD 上。 — toomanythings2, 2016-04
Scott Long 已经总结过几次,例如,来自 [LINK] :• 专业知识的可用性,优秀的社区 • 运行良好,良好的供应商支持 • 没有 GPL • 使用的功能:– SUJ – gmirror – 仅启动驱动器 – AIO – Dtrace, HWPMC – TCP 堆栈,模块化 CC 它缺少了“与 nginx 紧密集成:异步 I/O 和 sendfile()”,这是 Scott 在 [VIDEO] 中包含的。在视频中,他更详细地阐述了 GPL... 编辑:格式 — brendangregg, 2014-11
实际上,他们并不真正需要 ZFS 的大部分功能。所以他们不使用它。[VIDEO] — howeyc, 2014-08
> 我假设磁盘上无论是什么文件系统... Netflix 在 FreeBSD 10 上使用 UFS+J。以下是他们在 NYCBSDCon 2014 演讲中的一些笔记:- 每台设备 400,000 个流文件。- 每台设备 5,000 - 25,000 个客户端流。- 每个磁盘始终有 300 - 500 个流输出。- 尝试提前缓冲 1MB,但缓存无效。- 结果是完全随机的磁盘工作负载。- 系统受限于磁盘延迟和 CPU 负载。视频在此:[VIDEO] — runlevel1, 2014-07

相关视频