Rick Reed - WhatsApp:五亿毫无戒心的 FreeBSD 用户

Rick Reed - WhatsApp: Half a billion unsuspecting FreeBSD users

频道:iX · 时长:54:14 · 发布:2014-11-21 · 播放:30584

在 YouTube 观看

简介

WhatsApp 的 Rick Reed 在 MeetBSD 上谈论在 FreeBSD 和 Erlang 上大规模运行消息服务。他涵盖了技术栈、调优以及每台主机数百万连接的挑战。

HN 为什么推荐

被指出作为罕见地了解一个小型工程团队如何在 FreeBSD 和 Erlang 上运行 WhatsApp 大规模服务的视角。

他们的技术栈(FreeBSD/Erlang)非常有趣,更多信息:Rick Reed 2014 年的演讲 — HN, 2016

分布式系统 · Linux 与开源生态系统 · 云、DevOps 与可靠性

中文字幕节选

呃,我总是很难挤出足够的时间 来谈论我们为了让 Erlang 实现 真正的扩展、让我们能够完成工作而必须做的各种事情。 嗯,用 FreeBSD 的关键在于,我们不需要做太多。 呃,你知道,在房间里转一圈,听听每个人关于 为什么他们喜欢 FreeBSD 的评论,这些都让我们感同身受,呃,我说的是 真的,嗯,你知道,以我们团队的规模,服务器团队只有十几个人, 呃,我认为没有其他平台能让我们在操作系统层面 达到那种水平,使我们能够以现有的人员规模实现这样的扩展, 因为我们真的不需要担心操作系统层面发生了什么, 我们可以把所有时间集中在更高层次上。 呃,所以你会以为我已经吸取了给演讲起标题的教训。 每次我给东西起标题,呃,里面有数字或者类似的东西, 等到我真正演讲的时候,它的含义就变了。 嗯,如果你碰巧看了今年的 Erlang Factory 演讲,你就会明白 我指的是什么。 但不管怎样,我们现在已经超过 6 亿用户了。 嗯,毫无察觉,因为,呃,今天来之前有多少人知道 WhatsApp 使用 FreeBSD?好的,大多数人,嗯,很多很多 当交易宣布时,关于 Erlang 的讨论比 其他任何事情都多。但是,嗯,所以我整理了一些要谈论的 话题。这些没有特定的顺序。 嗯,如果在演讲结束时你说:“哇,他想表达的 要点是什么?”好吧,呃,就像我说的,这里根本的一点是,呃, FreeBSD 对我们来说简直太棒了,我们不需要做太多。 我们不需要太多。它就能正常工作。 而且,呃,所以我会给你们讲讲它如何进入公司的历史。 呃,一些可能有趣的统计数据,谈谈我们的 架构以及一路上的成功和挑战。 所以,呃,我在 WhatsApp 已经三年了,呃,大约三年半。 嗯,就像我说的,我们团队很小,所以我们基本上什么都做。 嗯,但我主要关注性能和可扩展性。 呃,做了很多多媒体系统的工作,我们用它来在用户手机之间 传输图片、音频文件、视频文件。 嗯,还有一点安全方面的工作。 我们都自己做运维。 我们没有专门的运维团队。 就像我说的,我们都参与所有事情。 呃,在 WhatsApp 之前,我在雅虎工作了 12 年。 嗯,我在那里的平台工程团队,呃,如你所见,我第一次 接触 FreeBSD 是在 1999 年雅虎的 2.2.8 版本上。 呃,我大概前五六年真的做了很多操作系统相关的工作。 嗯,你知道,我写了一个我们那里用的内核模块,嗯,所以我 算是负责平台库和操作系统之间 接口层的关键人物。 嗯,在雅虎之前,我在硅谷图形公司做了一些视频服务的工作, 再之前还有几家其他公司。 所以,呃,直接进入 FreeBSD 和 WhatsApp 的历史。 呃,所以使用 FreeBSD 的决定显然早于我。 呃,这可以追溯到公司成立之初,与 Yan 和 Brian 有关。 他们两个都是,呃,老派的雅虎人。 所以他们在那里都有很多 FreeBSD 的经验,以及它如何

HN 上的讨论

根据我目前的直接经验,我可以亲自向你保证,即使是为5000万用户运行服务,也远没有完全解决。去看看这个:[VIDEO] — felixgallo, 2015-09
这是必需的,因为你的手机是存储消息的地方。Whatsapp 在消息/媒体传递到你的手机后不会保留它们,这对许多人来说是一个引人注目的隐私功能。这也是他们能够以有限的硬件服务如此庞大用户群的原因。他们的技术栈(FreeBSD/Erlang)非常有趣,更多信息在这里:2014 年 Rick Reed 的演讲:[LINK] [VIDEO] 幻灯片:[LINK] 对于希望将 PC 作为主要客户端的用户来说,可能没有技术原因不能使用 PC 而不是手机(手机可选地以与桌面客户端为手机访问数据库相同的方式访问 PC 上的数据库)。也许他们已经决定这是一个小而萎缩的市场。编辑:第二次演讲的幻灯片 [LINK] 每秒 44 万连接,每秒 110 万消息,每天 10 亿张图片,那是在 2014 年... — ddeck, 2016-05
> 没有大玩家在之上开发酷炫的东西。 只是一个数据点,但 WhatsApp 工程团队坚称 FreeBSD 是一个关键的先驱,使他们能够在(相当强大的)机器上扩展到每主机 200 万+连接:[VIDEO] > 这只是表明,拥有一个技术上优秀的解决方案是无关紧要的。 确实。我见过许多有前途的项目在不受欢迎的情况下死亡/停滞,*BSD 不会是第一个。唉。 — ignoramous, 2019-03
有一个关于WhatsApp使用FreeBSD的演讲和幻灯片[1, 2]。在视频大约23:50处,Rick Reed谈到了第17张幻灯片,他们说他们运行的是9.1 - 9.3,并正在考虑10.1(不着急,因为9对他们来说够用了)。[1] [VIDEO] [2] [LINK] — WestCoastJustin, 2015-02

相关视频