3D 高斯泼溅 - 为什么图形学将永远不同
3D Gaussian Splatting - Why Graphics Will Never Be The Same
频道:IndividualKex · 时长:2:12 · 发布:2023-08-31 · 播放:2038411
简介
一个两分钟的解释视频,介绍 3D 高斯泼溅,这是来自 2023 年研究论文的渲染技术。它概述了为什么它可能改变 3D 图形的制作方式。
HN 为什么推荐
每当高斯泼溅被提及时,HN 都会用它作为快速、非专家的入门资料。
我非常喜欢这个简洁的 YouTube 视频,对于那些想入门的人 — HN, 2023
中文字幕节选
高斯泼溅,这是一种能以极高保真度、极快速度渲染物体的方法, 它之所以重要,是因为它与任何现有的图形管线都完全不同, 并且能够以144 FPS渲染出这样的场景。原始研究 论文是《3D高斯泼溅用于实时辐射场渲染》。这是什么 意思?我来解释一下它的工作原理。第一步,从不同角度拍摄一堆物体的照片, 然后使用一种叫做运动恢复结构的旧算法,从不同角度的照片中估计出 一个点云。第二步,取点云中的每个点, 说你现在是一个高斯分布,一个看起来像这样的分布,但是在 3D中,而且还可以倾斜,这就是我喜欢称之为多元的,大家都这么叫。 我们还给它分配一个颜色和一个alpha值。现在我们可以把所有这些高斯分布放入一个 巨大的矩阵中,有16列和行,每个高斯分布一行。这就是我们 表示场景所需的全部数据。那么我们完成了吗?没有。第三步,光栅化,意思是将 所有这些高斯分布转换成图像。简化版本是,根据你的相机 视角,将高斯分布投影到2D,然后按深度排序,然后对于每个 像素,从前到后遍历每个高斯分布,计算它们对该 像素的贡献,然后将它们全部混合在一起。现在我们有了图像。那么我们完成了吗?没有。第四部分, 训练。这些高斯分布没有正确的值,所以我们需要训练它们,意思是 调整高斯分布的值,使它们生成的图像看起来像 原始图像。这很像训练神经网络,但零层, 这就是为什么它如此之快。训练还使用自动致密化和修剪, 意思是当一个高斯分布难以拟合场景的细节部分时,它会分裂 成两个高斯分布,当一个高斯分布的alpha值太低时,它会被移除。现在我们 有了一个训练好的数百万高斯分布集合,可以从任何角度光栅化 生成图像。好了,现在呢?嗯,这是非常新的,有点像 传统光栅化刚出现时,然后《毁灭战士》出现了,添加了阴影, 大家都说哇,你有了阴影,然后出现了反射、法线贴图、 间接光照,你知道的,图形管线。这篇论文基本上是在 重新发明第一步。现在你可能会想,这不是摄影测量吗?不,因为 这是一种光栅化技术,意思是它直接将底层数据 转换为图像,不需要光线追踪、路径追踪或扩散。那么为什么 不呢?因为即使这是一个简单的操作,要让它看起来这么好, 你需要数百万个高斯分布,这需要几个GB的显存。那么图形学 即将彻底改变,还是像摄影测量一样是一个小众应用? 让我知道你的想法,如果你想跟上更多这类研究性的东西, 在Twitter上关注我。感谢观看。
HN 上的讨论
这个 2 分钟的视频是对该主题的绝佳介绍 [VIDEO] 我认为这项技术最近已经变得“生产就绪”,这得益于研究进展(开创性论文发表于 2023 年 [LINK])以及可微分编程库(如 PyTorch)和 GPU 硬件的改进。 — KerrickStaley, 2026-01
在复杂的计算机图形编程和研究领域,我是个彻头彻尾的门外汉,但作为一个喜欢玩电脑游戏的人,我对它很感兴趣。我非常喜欢这个简洁的 YouTube 视频,适合想入门的人:[VIDEO] — spsesk117, 2023-12
这周我看了一个关于高斯溅射的 YouTube 视频,印象深刻。[LINK] 我之所以被推荐这个,是因为我看了下面这个视频:[VIDEO] 如果之前不知道它存在,这两个都值得一看。 — qwertox, 2023-10
YouTube 给我推荐了这个视频,它简明地解释了溅射。交易所需的信息都在里面,但交易本身留给观众。没有强调的关键缺点是,你需要一个物理空间来近似你想要渲染的内容。所以如果你想根据你的工作场所制作几张反恐精英地图(不推荐),那么这会是个好技术,但如果你想在外星行星上制作开放世界,你最好还是用传统渲染。[VIDEO] — willis936, 2023-10
> [1] 2 分钟介绍 3D 高斯溅射:[VIDEO] 我完全不知道“高斯溅射”是什么鬼,不得不说这个视频一点忙都没帮上。 — ghostly_s, 2024-05
相关视频
- 计算机内存是如何工作的?💻🛠 · Branch Education · 35:32
- Matplotlib 更好的默认颜色映射 | SciPy 2015 | Nathaniel Smith 和 Stéfan van der Walt · Enthought · 19:08
- 表面稳定分形抖动技术详解 · runevision · 21:45
- SNES 代码注入——在 SMW 中运行 Flappy Bird · SethBling · 6:31
- CppCon 2017: Matt Kulukundis “逐步设计一个快速、高效、缓存友好的哈希表” · CppCon · 59:33
- 贝塞尔曲线之美 · Freya Holmér · 24:25
- 样条曲线的连续性 · Freya Holmér · 1:13:50
- Rgba 与 TBC 的 elevated | 4k intro(FullHD 1080p 演示场景 demo) · Demoscene High-Quality Videos (Annikras) · 3:36
- 用数学绘制角色 · Inigo Quilez · 24:46
- Wayland 和 X 背后的真实故事 - Daniel Stone (linux.conf.au 2013) · Mladen Mijatov · 45:35
- 深入解析Nanite虚拟化几何体 · SIGGRAPH Advances in Real-Time Rendering · 1:09:59
- Siggraph2019 几何代数 · Bivector · 1:37:21
- 我用数学画了一幅风景画 · Inigo Quilez · 42:00
- Elevated by RGBA and TBC · BUTTONTANG · 3:36
- 用 C 语言创建一个 Doom 风格的 3D 引擎 · Bisqwit · 18:49
- 编码冒险:蚂蚁与黏菌模拟 · Sebastian Lague · 17:53