Oculus Connect 主题演讲:John Carmack

Oculus Connect Keynote: John Carmack

频道:Meta VR · 时长:1:34:56 · 发布:2014-10-01 · 播放:48816

在 YouTube 观看

简介

John Carmack 在 2014 年 Oculus Connect 上关于 Gear VR 的主题演讲以及构建它的开发故事。他讨论了移动 GPU 优化、延迟以及可编程交错等显示理念。

HN 为什么推荐

HN 推荐它因为 Carmack 对 VR 渲染和延迟挑战的详细工程见解。

Carmack 2014 年 Oculus Connect 的主题演讲非常值得一看 — HN, 2015

软件性能与优化 · 科技先驱与访谈 · VR、AR与空间计算

中文字幕节选

[音乐] 女士们先生们,请欢迎Oculus首席技术官约翰 [音乐] 卡拉卡,好吧,其实我并没有准备演示文稿,但我可以站在 这里,谈论有趣的事情,直到他们把我赶下台 所以,大部分内容将是关于Gear VR的,因为这是我过去一年大部分 精力投入的地方。所以,对于太长不看的观众,我们将从 我们今天的现状开始,然后我们会回顾历史和我们走过的道路, 这为当前的情况提供了一些见解。所以我非常 坚信要非常坦率和开放地面对缺陷和限制,所以这 有点偏离标准公关计划的地方,呃,并且 非常坦率地谈论事情。所以当前Gear VR的致命限制 是它是一个60赫兹低持久性显示器,对很多人来说有闪烁 问题,而且它没有位置追踪,这是DK2和未来产品的 关键方面之一。所以,你知道,我们现在有计划和 缓解策略来应对这个问题,以及我们未来如何 改进它。60赫兹低持久性结果证明并不像 很多人预期的那么糟糕,有很多人只是觉得 这完全无法使用,当然Oculus一直在谈论 低持久性显示器的最低频率,很多人 惊讶地发现它并没有他们想象的那么糟糕,但仍然有 广泛的人群敏感性范围,对一些人来说它确实 很糟糕,有些人甚至注意不到,但作为开发者,你可以 做一些触发和事情来让它变得更好或更糟,而最大的 触发因素是你不会在视野中心注意到太多, 而是在周边区域你最敏感,所以像 Oculus Cinema这样的应用,你有一个黑暗的电影院,你知道,屏幕在 中心,这最终成为不会真正引起问题的 最佳案例之一,因为屏幕的所有角落都是黑暗的,呃,我的意思是 电影院体验有点酷,它是动态照明的,你会有大 爆炸在屏幕上,你周围的座位都会亮起来,但大部分情况下 它在角落处是黑暗的体验,所以从闪烁 角度来看很舒适,然后我们有像我们的VR冒险之类的游戏,或者我们最终 叫它什么的,但我们那个 neat little 类似塞尔达的跑动呃地牢爬行游戏, 基本上是一个黑暗调色板的游戏,那也相当不错,所以你不会 在那里注意到那么多,尽管另一个问题最终 与那种缓解方法相冲突的是,显示器屏幕有一个特点, 在DK2上基本上我们所有基于OLED的屏幕,它们有一个 怪癖,它们不会模糊太多,但有一个两帧上升问题, 你们很多人可能见过这个,它是一种鬼影,但不是 像全持久性显示器那样的拖影,但如果你看到特别是呃,像托斯卡纳的 黑暗树枝,你快速移动头部,你会看到一个鬼影 偏移一定量,与你的头部移动速度成正比,这是一个 问题,随着呃,颜色调色板变暗而变得更糟,你知道,非常暗的 颜色有更多的拖影问题,这是我们非常希望 三星在未来的显示器中修复的,但这并不是他们的首要任务 来解决,但在VR中很重要,呃,我们已经制定了缓解策略, 你可以DEH,那里有点像软件超频,如果你知道什么颜色你 输入,你知道你要去什么颜色,如果它更高,你实际上可以 驱动它比你想让它成为的更高,以补偿那个问题,

HN 上的讨论

虽然对于高保真游戏来说这可能是真的,但对于移动一些带纹理的三角形来说,移动 GPU 就足够了。此外,由于能够优化驱动程序,它们可以(并且确实)在每时钟周期性能上比 PC(尤其是 Mac)好得多。关于可能的优化的精彩讨论,Carmack 的 2014 年 Oculus Connect 主题演讲非常值得一看:[VIDEO] 这个演讲稍微有点长,但非常 informative,讨论了减少延迟和处理 PC 渲染的各种挑战:[LINK] — lhl, 2015-06
> 在Oculus期间,Carmack的开发重点是什么?我不确定具体是什么,但YouTube上有一些Carmack在Oculus Connect上的主题演讲。这是2014年的一个:[VIDEO],还有一年后的另一个,他在VR环境中现场编码[LINK]。如果你搜索,还会找到更多。我记得几年前浏览过它们,不是因为我对VR开发感兴趣,而是因为我一直是Carmack作品的终身粉丝,喜欢听他谈论事情。 — nickjj, 2021-06
找到了 Carmack 谈论它的地方[1]。对于 VR,我看到的共识似乎倾向于多采样抗锯齿 > 全屏抗锯齿 > 时间抗锯齿(我甚至觉得没有抗锯齿也比时间抗锯齿好)。我不太确定这是性能、架构(他们真的更喜欢前向渲染器而不是延迟渲染器,以实现低延迟)还是美学的原因。在我做的一点点工作中,当只是调整参数时,时间抗锯齿对我来说看起来更好。没有抗锯齿时,高光太分散注意力,太突出了。这篇参考[2]谈到了时间抗锯齿所需的额外速度缓冲区,以及它往往会过度模糊,从而模糊掉精细细节(低分辨率在 VR 中是个敏感话题)。做决定时有很多变动因素。在谈论隔行扫描时,他理想中是在谈论不必在将数据发送到硬件之前创建整个图像缓冲区——只需渲染移动的部分(嗯,扫描线)图像。[1] [VIDEO] [2] [LINK] — pfranz, 2016-11
说到“无边框”渲染,我在 Carmack 的 Oculus 主题演讲([VIDEO])中注意到,他谈到试图说服三星将可编程隔行扫描集成到他们的显示器中,以便动态地逐帧控制哪些行被扫描。这将给你在你链接中看到的同样的“自适应逐像素更新”,尽管主要是为了解决 HMD 的问题(高帧率下的低持久性)。 — barium, 2014-12
要记住的事情的绝佳列表。当然,如果你恰好是 John Carmack,像巨人一样双腿稳稳地站在舞台上,那么成为雕像也是允许的:[VIDEO] — DanAndersen, 2015-06

相关视频