让谷歌的网络为你所用
Putting Google's Network to work for You
频道:Google for Developers · 时长:7:05 · 发布:2014-06-25 · 播放:23146
简介
2014 年 Google I/O 大会上 Simon Newton 的七分钟演讲,讲述开发者如何利用谷歌的全球网络。它介绍了该网络的覆盖范围以及运行在其上的一些服务。
HN 为什么推荐
包括一位谷歌员工在内的 HN 评论者引用它作为谷歌如何提供流量的公开解释,包括基于 DNS 的负载均衡。
Simon Newton 的视频,描述了全球覆盖范围和一些服务 — HN, 2016
中文字幕节选
大家好,我是Simon Newton,Google云网络团队的一名软件工程师。 在这次演讲中,我将介绍两种不同类型的 Google Compute Engine上可用的负载均衡。 这将展示您现在如何利用Google的技术 来提升您自己Web应用的性能。 在Google,我们过去15年一直在构建基础设施, 让我们的网站更快、更可靠。 如今,我们用这些系统来服务YouTube、Maps、Gmail、 Search以及许多其他产品。 但首先,让我们回到1999年, 看看Google前端服务基础设施的演变。 起初,Google的服务基础设施 非常简单,因为我们只在加利福尼亚有一个数据中心。 我们在硬件负载均衡器后面配置了少量Web服务器。 硬件负载均衡器有一个虚拟IP地址, 简称VIP,由我们的四台DNS服务器之一提供给客户端。 系统中的冗余非常少。 所以一旦数据中心出现问题, Google.com就会对所有人宕机。 2000年,随着越来越多的人依赖Google, 我们在美国东海岸增加了额外的数据中心。 有了这些数据中心,就有了第二组 Web服务器和另一个硬件负载均衡器。 当客户端解析www.google.com时, 它们会被随机发送到两个位置之一。 这提供了一些冗余,但增加了许多用户的延迟。 有一半的时间,西海岸的客户端被发送到国家的另一边。 为了改善这种情况,我们改用地理定位DNS服务器。 DNS服务器会使用客户端DNS 解析器的IP地址来决定返回哪个VIP。 这意味着在大多数情况下,用户请求会被发送到最近的数据中心。 然而,有时在高峰时段, 最近的数据中心容量不足, 所以DNS服务器会把客户端发送到次近的数据中心。 以这种方式溢出请求对用户不利, 因为这意味着我们不是从 最佳位置为他们提供服务,因此他们的延迟高于正常水平。 在Google,我们把这种 使用DNS来平衡请求的方法称为前端负载均衡。 此时,Google提供的产品 已不仅仅是网页搜索,我们需要一种根据URL来引导请求的方法。 我们引入了一个新系统,称为Google Front End,简称GFE。 GFE接受客户端的TCP连接,并检查主机头和URL路径, 以确定哪个后端服务应该处理该请求。 后端服务是能够处理特定类别流量的一组服务器。 例如,对google.com上maps的请求会被发送到我们的地图服务器, 而对news.google.com的请求会被发送到我们的新闻服务器。 GFE还负责对其后端进行健康检查。 如果后端服务器未能响应健康检查, GFE将停止向该故障后端发送流量。 通过仔细调整GFE健康检查参数, 我们能够升级GFE后端的 内核或二进制文件,而不会中断任何用户请求。 GFE还维护到其后端的持久TCP连接, 因此连接 在请求到达时即可使用。 这也有助于我们降低用户的延迟。 此时,我们需要能够从与GFE运行所在
HN 上的讨论
我只在公开资料中找到过两样东西。与 DNS GSLB 相关的专利 [LINK] 和 Simon Newton 的视频,其中描述了全球布局和一些服务 [VIDEO] 。我对 GSLB 的大部分了解来自我在谷歌工作的时候。 — chuhnk, 2016-02
免责声明:不代表任何人,我的观点不代表其他人的观点。我在谷歌工作,我的团队负责这个。这里:[VIDEO] 我不能告诉你任何不在那个视频中的内容。 — asuffield, 2015-03
正如其他人提到的,这似乎完全符合预期,因为谷歌使用 DNS 进行负载均衡,并从尽可能靠近你的数据中心提供查询服务。如果你想了解其工作原理的一些细节,可以看看 [VIDEO] 。免责声明:我为谷歌工作。我代表自己等等。 — simonlbn, 2014-11
相关视频
- Velocity NY 2013: Richard Cook, "复杂自适应系统中的韧性" · O'Reilly · 19:09
- 火线调试:系统失控时保持冷静 • Bryan Cantrill • GOTO 2017 · GOTO Conferences · 52:34
- AWS re:Invent 2018: Amazon DynamoDB 深入探讨:DynamoDB 高级设计模式 (DAT401) · Amazon Web Services · 59:56
- 更难的硬盘:我们不想要也不需要硬盘 · suckerpinch · 36:46
- 本视频由 ███ VPN 赞助 · Tom Scott · 7:25
- Literate Devops with Emacs · Howard Abrams · 28:36
- 看待网络的新方式 · Google · 1:21:15
- 网络中立性:约翰·奥利弗的《上周今夜秀》(HBO) · LastWeekTonight · 13:18
- 从零开始构建容器 • Liz Rice • GOTO 2018 · GOTO Conferences · 42:53
- 超过20万台服务器在一个地方!参观德国法尔肯施泰因的Hetzner · der8auer EN · 20:29
- Joyent的Bryan Cantrill谈Manta:面向互联网的对象存储设施,集成了计算能力 · AI Council · 1:31:05
- Zebras All the Way Down - Bryan Cantrill, Uptime 2017 · Code & Supply · 46:36
- ElixirConf 2018 - Docker 与 OTP 是友是敌 - Daniel Azuma · ElixirConf · 38:53
- 斯坦福研讨会 - 新机器的灵魂:重新思考计算机 · Stanford Online · 1:26:02
- AWS re:Invent 2016:周二晚间直播 with James Hamilton · Amazon Web Services · 1:33:27
- 字符、符号和 Unicode 奇迹 - Computerphile · Computerphile · 9:37