用这个巧妙的视频技巧揭示看不见的运动
Reveal Invisible Motion With This Clever Video Trick
频道:Steve Mould · 时长:14:20 · 发布:2020-06-04 · 播放:2823113
简介
Steve Mould 解释了运动放大和视频放大技术,这些技术可以发现视频中人眼看不见的微小变化并将其放大。他涵盖了麻省理工学院的研究以及工业用途,例如诊断振动机械。
HN 为什么推荐
每当视频放大或振动可视化出现时,被指为一种平易近人的外行解释。
Steve Mould 的外行视频 — HN, 2020
中文字幕节选
- 假设你管理着一家生产小部件的工厂, 那边有个旋转的东西,这边有个上下运动的东西, 这是一个复杂的装置,会产生大量振动, 所以你相当合理地担心有一天 你的工厂会把自己震散架, 就像这里的小振动可能导致螺栓松动, 这又会导致更多振动,进而在这里造成金属疲劳, 然后导致更大的振动,这是一个滚雪球效应。 所以你想在振动成为问题之前及早发现它们, 甚至在它们被人眼看到之前,那你该怎么办? 嗯,你可以在你担心的地方安装一些传感器, 所以也许你在这边的管道上装一个加速度计, 你担心它可能上下移动过多, 那个传感器为你提供数据, 你绘制图表,可以看到它上下移动, 并且在限制范围内,你可以监控它,一切正常。 但如果工厂里有一个地方你忘了 安装传感器,因为你觉得它没问题呢? 如果你能拿数百万个传感器 直接扔到工厂各处,捕捉一切呢? 事实证明你可以,而且实际上, 你一直随身带着一套这样的传感器,我说的是你的手机, 具体来说,是手机里的摄像头,那个为照片收集光线的芯片, CMOS芯片由数百万个独立传感器组成,每个像素一个, 嗯,我想实际上每个像素有三个。 实际上,你可能想用比手机摄像头更好的东西, 工业级的,带有全局快门。 所以你拿一个摄像头,拍一些视频, 先从一些非常宽的镜头开始, 确保你捕捉到一切, 但如果你要找的振动是如此微小, 它们无法被人眼察觉, 那么摄像头怎么能看到这些振动呢? 这就是运动放大的用武之地, 事实上,到目前为止我展示的所有镜头都是运动放大的,例如这里, 你可以并排看到原始镜头和运动放大后的镜头。 原始镜头看起来根本没有移动, 但其中包含微妙的运动信息, 在另一边被放大了。 事实上,原始视频可以包含亚像素运动, 并且仍然能放大这些信息, 所以你甚至没有一条硬边缘扫过几个像素, 相反,你有一行像素变得更暗, 而相邻的像素变得更亮, 你可以将这些信息解释为运动, 并放大它,这真的很不可思议,尤其是当你考虑到 你是在噪声背景下提取这些信息, 所有数字图像和视频都包含一些噪声, 这是一种花哨的说法,指的是随机波动 在单个像素的亮度中。 我与RDI Technologies的Jeff Hay交谈过,他创建了运动放大系统, 该系统用于工业领域。 - 我最初从事天文学,以为我会成为天文学家, 但我想我和我的导师有过一次对话, 是关于如何获得有报酬的工作, 你知道,令人惊讶的是,问题集几乎是一样的,你明白我的意思吗? 你在用摄像头弄清楚一些事情 关于某个物体,你知道,它有点距离, 我有的另一个爱好是,我是大学报纸的图片编辑, 所以我也有摄影背景, 所以所有这些事情就开始汇聚到一起, 你知道,我最终去了哪里并不是什么秘密。 即使是一台百万像素的相机,以今天的标准来看, 分辨率算是小的,它里面有一百万个传感器, 你可以用传感器覆盖一个物体,测量每个地方, 但当你有一个电机和一个泵时,
HN 上的讨论
我找到了另一个关于这个话题的视频,想分享一下。[LINK] 还有 Steve Mould 的通俗版视频 [VIDEO] — djmips, 2020-09
确实有这方面的研究——“运动放大”,将机械中的振动可视化:[VIDEO] 研究概述,以及 HN 上的讨论:[LINK] TED 演讲:[LINK] 编辑:TFA:> 从单个像素颜色值随时间的变化,可以推断出小于一个像素的运动。> 研究人员借鉴了早期关于放大视频中微小变化的算法工作, — mgdlbp, 2022-08
把这个与运动放大/视频放大 [1] 结合起来,可能会为工厂设备带来一些非常有趣的视觉效果和应用。[1] [VIDEO] 关于运动放大的 YouTube 讲解视频 — davidb_, 2021-10
我最近看了 Steve Mould 关于这个的视频。[VIDEO] 用过它的人似乎暗示他的版本有点“独门秘方” — djmips, 2020-09
相关视频
- IBM Selectric 打字机及其数模转换器 · engineerguy · 3:05
- 《古惑狼》联合创作者 Andy Gavin:扩展采访 | Ars Technica · Ars Technica · 2:13:39
- 3dfx 口述历史座谈:Ross Smith、Scott Sellers、Gary Tarolli 与 Gordon Campbell · Computer History Museum · 2:35:32
- 用数学学习绘画 · Inigo Quilez · 24:02
- 为什么光在水中会变慢? · Fermilab · 10:24
- 我用数学画了一幅风景画 · Inigo Quilez · 42:00
- 8 位计算机更新 · Ben Eater · 6:53
- 拆解一套便宜的eBay数显卡尺 · bigclivedotcom · 23:32
- AT&T档案:波行为的相似性(特别版) · AT&T Tech Channel · 28:02
- 热泵:家庭供暖的未来 · Technology Connections · 35:15
- 理查德·费曼谈火 · nebulajr · 4:43
- 打造逼真的人造太阳(为黑暗冬日) · DIY Perks · 19:44
- 湾区视觉会议:无监督特征学习和深度学习 · Google TechTalks · 48:10
- 棕色;颜色真奇怪 · Technology Connections · 21:14
- "语音驱动开发:谁还需要键盘?" 作者 Emily Shea · Strange Loop Conference · 41:17
- 安德烈·卡帕西 - 特斯拉全自动驾驶的人工智能 · Matroid · 30:08