Anthony Marcar - Clojure 大规模应用 @WalmartLabs
Anthony Marcar - Clojure At Scale @WalmartLabs
频道:ClojureTV · 时长:39:41 · 发布:2015-04-22 · 播放:23590
简介
Anthony Marcar 讲述了在 WalmartLabs 使用 Clojure 三年的经验教训,包括在企业环境中扩展团队和大型多项目代码库。
HN 为什么推荐
HN 引用它作为 Clojure 在沃尔玛运行真实大规模生产系统的证据,以及来自该团队的幕后演讲。
想了解幕后情况,请查看我们去年在 Clojure/West 上的演讲。 — HN, 2016
中文字幕节选
好的,我叫 Anthony Makar,在 Walmart Labs 工作,是一名 Clojure 开发者, 今天我要谈一谈大规模使用 Clojure。所以当我说大规模使用 Clojure 时, 我指的是我们在沃尔玛使用 Clojure 已经大约三年了。 就像 Clojure 社区里的很多人一样,当你运营的规模稍微大一点, 比通常大一些,这里就像是一片前沿领域。有很多 教程教你如何创建小型 Clojure 应用,你知道,一些小 库之类的。但关于如何创建更大规模应用的资源, 我们并没有找到太多。所以这次演讲 基本上是分享我们的经验,一些我们 发现还算可行的做法。我不想让这变成“这就是你 应该做的”,这只是我们的经验和推荐, 每个人都应该以不同的方式做事。这是一片前沿领域,但不管怎样, 这就是我们总结出来的。简单介绍一下我们的系统:我们运营一个 叫 ear receipts 的团队,在沃尔玛内部,面向店内的顾客。它涉及 几件事。基本上,店内打印的每一张收据底部都有一个二维码, 这个二维码编码了收据的唯一标识,这样你 就可以用沃尔玛应用或任何应用扫描它,它会把那张 收据下载到你的手机上,关联到你的账户,这样你就可以 退货了。你再也不会丢失那张收据了。未来我们希望完全 无纸化。除此之外,沃尔玛内部还有一些其他团队 可以使用这些信息,为顾客提供其他好处。省钱 捕手基本上就是如果其他商店更便宜就返钱。Insta Watch 是获取你在商店购买的电影的数字副本。还有 一小时保证,这是世界上最大的促销。所有这些 公司内部的合作伙伴也使用我们的数据。在数据中心里,事情开始变得 更有趣了。我们有接近 5000 家沃尔玛门店,我想现在 我们从所有这些门店获取数据。每次打印收据, 那笔交易就会发送到我们的数据中心,在那里发生一大堆事情, 一大堆副作用。这些可能是保存到数据库,可能是 转发给沃尔玛内部的其他合作伙伴,可能是发送推送 通知给顾客。本质上就是一条单向的数据管道进来, 然后各种事情发生。当然,在内部我们使用 Clojure。 本质上是一个单向的数据有向图。我们在所有 消费者和生产者之间都有持久队列,因为当你在 沃尔玛数据中心运营时,东西会上下波动,会丢失,Zack 刚才讲的一切都非常真实,尤其是在这种规模下。所以所有的 边缘我们都有键。如果 Apple 宕机了——我希望不会,但如果真的宕机了, 我们实际上有一个队列会阻塞,你知道,保护我们免受那部分 领域的影响,反之亦然。对于所有其他副作用,我们还有很多其他 Clojure 代码。我们有 Clojure 来做 REST API,称为 access,我们有 Clojure 来做 部署,我们有 Clojure 来做监控,一路到底都是 Clojure。我们大量 使用 Clojure。总的来说,我们运行大约 20 个服务, 大约 5 万行代码,大约 70 个 Leiningen 项目。这些
HN 上的讨论
这并不是形式化方法比其他方法更有效的经验证据。它只是表明这些公司的文化有利于使用它们。沃尔玛[VIDEO]和波音[LINK]等使用不同的方法。:) — yogthos, 2018-02
亚马逊特别将 Clojure 用于在线结账系统,几年前该团队还夸耀该系统在黑色星期五期间毫无故障地挺了过来。沃尔玛也在结账系统中使用 Clojure [VIDEO] 波音在 737 Max 的机载控制系统中使用它 [LINK] 这不是某个实习生周末写的什么冷门微服务,这些公司将该语言用于关键应用,而且这些公司的反馈都是正面的。 — yogthos, 2017-10
WalmartLabs - Clojure 开发者。| 旧金山 | 远程(美国时区)| H1B 签证 你可以在不少公司用 Clojure,但很少能像这样在个人层面上影响数百万人。我们是一个小而扁平化的工程师团队,为沃尔玛构建关键任务应用。我们使用自己的工具,自主决定是自建还是借用。我们的文化是分享与互相推动、让彼此在技艺上更上一层楼的健康结合。我们大量使用拉取请求和代码审查。我们留出重构时间。我们频繁部署,只需从 REPL 运行一行代码。我们团队的工程师被要求打通整个软件栈,并参与产品管理。我们相信,当人们感到对真正交付自己的工作负责时,他们会更投入、更满足、更快乐。我们工作中一些对我们很重要的方面:- 高性能分布式系统 - 健壮且结构良好的代码库 - 简单快速的部署 - 将运维自动化到极致 - 全面的系统测试覆盖 - 管理我们自己的开发流程和工作待办 - 在合理时进行结对编程(本地和远… — mfoster, 2016-11
WalmartLabs - Clojure 开发者。| 旧金山 | 远程(美国时区)| H1B 签证 你可以在不少公司用 Clojure,但很少能像这样在个人层面上影响数百万人。我们是一个小而扁平化的工程师团队,为沃尔玛杂货构建关键任务应用。我们使用自己的工具,自主决定是自建还是借用。我们的文化是分享与互相推动、让彼此在技艺上更上一层楼的健康结合。我们大量使用拉取请求和代码审查。我们留出重构时间。我们频繁部署,只需从 REPL 运行一行代码。我们团队的工程师被要求打通整个软件栈,并参与产品管理。我们相信,当人们感到对真正交付自己的工作负责时,他们会更投入、更满足、更快乐。我们工作中一些对我们很重要的方面:- 高性能分布式系统 - 健壮且结构良好的代码库 - 简单快速的部署 - 将运维自动化到极致 - 全面的系统测试覆盖 - 管理我们自己的开发流程和工作待办 - 在合理时进行结对编程(本地… — mfoster, 2016-05
WalmartLabs - Clojure 开发者。| 旧金山 | 远程(美国时区)| H1B 签证 你可以在不少公司用 Clojure,但很少能像这样在个人层面上影响数百万人。我们是一个小而扁平化的工程师团队,为沃尔玛杂货构建关键任务应用。我们使用自己的工具,自主决定是自建还是借用。我们的文化是分享与互相推动、让彼此在技艺上更上一层楼的健康结合。我们大量使用拉取请求和代码审查。我们留出重构时间。我们频繁部署,只需从 REPL 运行一行代码。我们团队的工程师被要求打通整个软件栈,并参与产品管理。我们相信,当人们感到对真正交付自己的工作负责时,他们会更投入、更满足、更快乐。我们工作中一些对我们很重要的方面:- 高性能分布式系统 - 健壮且结构良好的代码库 - 简单快速的部署 - 将运维自动化到极致 - 全面的系统测试覆盖 - 管理我们自己的开发流程和工作待办 - 在合理时进行结对编程(本地… — mfoster, 2016-04
相关视频
- Ruby Conf 12 - Y Not- 函数式编程历险记 by Jim Weirich · Confreaks · 53:21
- RailsConf 2014 - Sandi Metz 谈所有的小细节 · Confreaks · 38:47
- Erlang和Elixir的灵魂 • Sasa Juric • GOTO 2019 · GOTO Conferences · 42:02
- “简单造就易用” - Rich Hickey (2011) · Strange Loop Conference · 1:01:38
- Richard Feldman 谈“让不可能的状态不可能” · elm-conf · 25:06
- William Byrd 谈“有史以来最美丽的程序” [PWL NYC] · PapersWeLove · 1:31:05
- 如何设计好的 API 以及为什么它很重要 · Google TechTalks · 1:00:19
- Rich Hickey 谈价值的价值 · InfoQ · 31:43
- 为什么函数式编程没有成为主流?—— Richard Feldman · Metosin · 46:09
- 《守望先锋》游戏架构与网络代码 · GDC Festival of Gaming · 1:04:03
- 也许不 - Rich Hickey · ClojureTV · 1:03:28
- 用 Clojure 的方式解决问题 - Rafal Dittwald · Clojure/north · 1:02:26
- 第一讲A:Lisp概述与简介 · MIT OpenCourseWare · 1:12:55
- APL中的康威生命游戏 · Dyalog · 7:47
- 讲座 1A | MIT 6.001 计算机程序的构造和解释,1986 · MIT OpenCourseWare · 1:12:55
- Alan Kay - 正常被认为有害 · powerfuloutlet · 1:07:26