当前位置:首页 >> 智能

Meta深度分享:变焦头显以及用光场系统设计实现无重投影MR透视

来源:智能   2024年01月19日 12:16

olution Varifocal VR》

为了通过这两项的LCD基板意味着病变超声,Butterscotch Varifocal缩减了视场,仅为50度,而Meta Quest 2的视场大于90度。另外,外形外观上比Quest 2等商品类背显大一点。

Douglas Lanman足量道:“整体而言,我们在Half Dome 1到3的数据分析侧重于以一种完仅有可视的方式也为了将昂距关键技术。我们圆桌Half Dome本来的兼职即便如此打算再次,但我们暂时性停下来并幻灯片Butterscotch Varifocal,最终目标是展示出我们即便如此共同共同努力昂距关键技术,并共同共同努力在VR背显中会提供以致于好的感官敏感度和舒适度。我们坚信尽办法我们的的社区很难亲临领略昂距关键技术,并参予主导这项关键技术的演进。”

Half Dome 3转用了电子元件昂距系统会,而与以前的机械设备昂距系统会相较,它大大减少了系统会的外观上,但顾虑到所就其的取舍,制作组在结构设计Butterscotch Varifocal时选择重返机械设备式昂距方案。

Yang Zhao声称:“尽管Half Dome 3中会的电子元件昂距减少效率突显小外观上,载重量以致于驭,并且完仅有是固态,但在超声结构设计中会加到另一个超声元件或模块不可避免地都能转用光照光纤等性能严重损失或降较低影像能量密度。对于Butterscotch Varifocal,我们的要务是建构最佳的感官能量密度。所以,我们选择功能有力一个机械设备昂距系统会,从而最佳化影像能量密度,同时降较低系统会外观上和载重量。”

正如接口在Half Dome和Butterscotch项目中会随着时长的不长而演进一样,软件包都只在不断改进和未成熟。

数据分析现代科学数据分析Olivier Mercier回应:“为了建构一个优秀的昂距领略,接口和软件包都能够无缝地相互配合。我们对失真校正、眼动监视、图像和时间延迟的理解都得到了进一步提高,可以借助于我们最好的昂距接口来造就其最大的潜能。长期以来,昂距关键技术早已从一个商业性的数据分析课题变成了以致于多人感热情的正向。我们的昂距软件包早已从一个周期性、数据分析性质的、一次性的主代码分支演进成可以与我们VR平台的其他片段以致于好地功能有力在一起的元素。这使得与其他制作组的合作更为以致于加非常容易,并确保昂距成图像管路中会关键的总括,从而授予以致于好的领略。这种以致于的关系的整合同时意味着,我们今天可以背书以致于多的新游戏和应用,而不是像现代的昂距背显那样只能采用以致于有用的或定制的幻灯片章节。”

就此的结果大相迳庭。当你环顾四周时,吸引你重心的章节很难宝贝地变昂,而那时候可能会未遭过分的小先以前都都能彩虹起来。以Ready At Dawn的《Lone Echo II》为例。从机器人车身的着色到丽芙背发的挑染,所有的先以前都更为简洁可见。之外的幻灯片将极致呈现开发者多年的自信共同努力和对先以前关注,而这是空以前的领略。

Yang Zhao评价道:“有了Butterscotch Varifocal,我们可以在VR中会看不到与虚幻在世界上所见的相似的超声和能量密度。这为在VR中会构筑日后人惊叹的领略打开了诸多仅有新可能会性。”

Flamera:对Passthrough投影的仅有新理解

当你坚信尽办法一个完仅有似曾相识的领略或者在尽量会大的画面看影片时,VR非常优秀。但有时候,你都能坚信尽办法与结构上在世界上有以致于多的联系,例如当什么出乎意料地进入你的新游戏空间时,或者当你坚信把ID章节带到宇宙学环境中会时。这时我们就能够分离虚幻和Passthrough投影,因为述及关键技术可以受受到限制你背显看不到宇宙学在世界上的小数点再现。

诸如Quest Pro这样的现代背显在投影之外的显出甚为优秀(Quest 3都能动手得以致于好)。然而,那时候的投影具体来说背显的以前置摄像背。由于位差疑虑,它主要是通过计算来将影像重新可视到“无论如何”镜像,但这可能会造成了感官伪影。即便你很难把摄像背反之亦然摆在嘴唇以前面,由于背显的厚度,镜像即便如此都能以致于简洁。

数据分析现代科学数据分析Grace Kuo声称:“为了防范这一关键天都,我们背脑风暴了一个可以反之亦然捕获你用裸眼看不到的不同光照的超声体系结构。通过从零开始结构设计,而不是修改这两项的背显,我们就此得到了一个看来非常截然不同的,可以意味着以致于好投影影像能量密度和以致于较低时间延迟的摄像背。”

与传统的波数摄像背并不不同,Flamera在元件中会的每个透镜后面都有一个放大。述及放大可以阻隔不能够的光照,所以只有盼望的光照很难驶离嘴唇。作为对比,传统的波数摄像背都能捕获以致于多的光照,造成了影像超声较低得日后人只能接受。所用作的体系结构同时将受限的传感器纹理集中会于波数的之外部分,从而造成了以致于较高超声的影像。

Flamera重新排列纹理,少于一个粗略的深达图,从而意味着基于深达的重建。

之外博士论文:《Perspective-Correct VR Passthrough Without Reprojection》

所有这一切的结果是,通过背显看不到的宇宙学在世界上以致于接据统计于嘴唇自然看不到的画面,而且与目以前的商用背显相较,伪影以致于少,同时超声比传统的波数摄像背以致于较高。这为下一代以致于加单纯的MR领略打开了大门,意味着一种ID章节与虚幻在世界上无缝融合的镜像领略。

Grace Kuo回应:“Flamera的超声结构设计在背显较薄时特性最好,这使得我们可以将投影摄像背尽量会地靠据统计Gmail的嘴唇。然而,我们用作的摄像背传感器不存在众多电子元件组件,都能日后背显更为以致于厚,所以我们才会结构设计定制的凸起装置来移动它们。总的来说,从波数投影的新方到一个比较简单的、可兼职的背显,这是一个日后人好奇的关键天都。”

和Butterscotch Varifocal一样,Flamera的最终目标并不是要展示出一种考虑的商品电子元件产品,仅仅今天不是。

Douglas Lanman问道:“对于我们在波数投影之外的数据分析,我们投身于于Vista投影无论如何的MR投影领略。我们以前与SIGGRAPH的社区倾听了神经投影项目,用作机器学习新方法合成比伪影少于这两项商业性系统会的投影影像。然而,神经投影即便如此都能造成了重可视伪影,并且能够桌上型电脑级的GPU来可视操作。波数投影则采用计算超声新方法,摄像背接口和重可视算法结构设计成相互配合,从而极大地重构了合成带有无论如何角度的视点的计算关键天都。”

数据分析现代科学数据分析Nathan Matsuda是之外数据分析的先导主角,他启动并经营管理了投影视点无论如何项目,以及也就是说投影和较高一个系统全域VR项目。就像Half Dome Zero一样,述及项目造成了的接口通常甚为笨重,甚至可能会太奇特。但它们是下一代的潜在光临。

Douglas Lanman声称:“我们的波数投影幻灯片Vista了如果我们很难系统化涡轮机这个本来的波数摄像背接口,MR投影可能会有一天都能变成什么就让。与也就是说投影一样,它在这个本来中会可能会看来非常奇特,但我们坚信尽办法的社区很难从他们的现代幻灯片中会得到启发。它为投影无论如何光纤明确指出了一条再次以前进的路面。它在那时候却是可能会很‘诡异’,但很可能会在下一代被证明是可视的,很难充分利用下一代MR背显的Gmail领略和轮廓关键天都。”

Grace Kuo足量道:“我们预坚信了一种受受到限制你戴着背显与都能无缝交互的投影领略。非常适合的光纤受受到限制我们很难说服力地将小数点章节瞬时到对宇宙学在世界上的感闻,同时借助于VR背显的较高对比度、宽视场辨识器。我们投身于于投影的一个最主要之外,亦即摄像背角度。我们的幻灯片首先展示出了无论如何角度下的投影特性,并且没计算投影新方法造成的失真。”

总结来说:以前面的路即便如此不间断,但这是一个充满坚信尽办法的开始。

Demo or Die(要么幻灯片,要么毁灭):重返SIGGRAPH

辨识系统会数据分析制作组长期以来长期以来在完成数据分析和发布新闻发布,而他们长期以来长期以来坚持“Demo or Die(要么幻灯片,要么毁灭)”的精神。

Douglas Lanman问道:“对我来说,‘Demo or Die(要么幻灯片,要么毁灭)’这个其实起源于芝加哥大学平面媒体实验室,我和其他数千名数据分析其他部门都在那里习得了这个符咒。关键是通过幻灯片来阐释‘为什么’,而不是‘是什么’,从而帮助刚接触之外关键技术关键天都的其他部门理解为什么他们坚信尽办法这样一项关键技术,比如昂距、波数投影和HDR。我们可以幻灯片一种相异领略,给大家Vista如果这项关键技术很难以一种可视的、可扩展的方式也完仅有意味着,就此领略将是什么。这正是SIGGRAPH的本体:展示出新兴的,主要是接口涡轮机的关键技术,并以此激励SIGGRAPH的社区将他们的才能造就在计算机图形和交互中会的特定疑虑之上。”

例如,经过据估计一年的在表面上幻灯片和Gmail数据分析,较高一个系统全域背显本来Starburst取得了日后人振奋的取得成功,并授予了SIGGRAPH 2022新兴关键技术最佳展示出奖。

Nathan Matsuda记得道:“这段境遇对我们这群参予其中会的其他部门来说非常棒。我们都能见了众多HDR辨识教育领域的杰出外籍人士,以及一以前传来自并不不同背景的无聊外籍人士,仅限于首席执行官、主要影片电影院的较他的一些公司、美国国家航空航天局的现代科学数据分析。幻灯片的取得成功进一步我们加倍共同努力向的社区展示出我们的兼职,并成我们今年幻灯片的月所。引人注意是,我坚信想法用一种现代科学展览馆的方式也来阐释我们今年的兼职,将接口的转化镜像作为展位的中会心。似乎证明,这是一种非常好的系统,可以向带有相当多并不不同关键技术专长的其他部门阐释我们的数据分析,吸引参观者,确保大家在排队时保持热情。因此,今年我们将在这两款本来机之外拷贝这一点。。”

辨识系统会数据分析制作组爱好用引人注意的名称来突显其兼职重点。这是一群多才多艺的其他部门,他们跨学科兼职,以意味着截然不同的,整体的,并且经常是意料之外的减少效率,从而防范服务业导致的关键天都。例如,从以前的North Star北极星借此是向在世界上展示出一条潜在的再次以前进路面,不是突显电子元件产品化,而是用敏锐的睿智来激励其他人看不到这项数据分析的以前景,并承担起法律责任主导我们所有人走向以致于圣者的下一代。今天,辨识系统会数据分析制作组正再次朝着这个正向不断共同努力。

Douglas Lanman回应:“在SIGGRAPH展示出数据分析长期以来是我们的计划案。对我自己来说,从十多年以前我第一次幻灯片波数辨识器到今年我们展出的两个本来机,SIGGRAPH新兴关键技术展长期以来是我本赛季中会最最主要的商业性活动。我们曾坚信尽办法展示出只不过的Half Dome背显,但新冠疫情阻止了之外的计划案。整个制作组都非常较高兴动手到‘Demo or Die(要么幻灯片,要么毁灭)’。作为一名VR/MR爱好者,我非常较高兴大家很难根据我们的本来而不是简报来我们。”

对于坚信尽办法大众能从这个故事中会得到什么,制作组的反问是:

Grace Kuo:“我普遍认为透传是一项最主要的关键技术,可以受受到限制人们在穿戴背显期间与都能密切合作。通过构筑没商业性化电子元件产品受到限制的幻灯片章节,我们可以测试者新关键技术并展示出VR中会的并不不同领略。即便背显的轮廓与我们那时候所习惯的通讯设备非常并不不同,但我坚信尽办法想法了幻灯片章节的人很难瞥见下一代VR的就让。”Yang Zhao:“通过我们的兼职,我坚信尽办法人们很难从第一人称的角度看不到VR可以为他们新增的领略和潜能。这可能会不是他们可以马上在商店里买到的外面,但如果有需求,而且关键技术再次不断进步,总有一天都能意味着。”Olivier Mercier:“VR的可能会性和商品这两项电子元件产品之间不存在巨大的区别于。我们的两个SIGGRAPH新兴关键技术幻灯片提供了一个截然不同的机都能,可让你看不到如果每个连杆都推到以致于较高的能量密度,在不顾虑可电子元件产品化受到限制的完仅有,这都能怎样帮助建构以致于逼真的ID领略。”Douglas Lanman:“我坚信尽办法计划案参与SIGGRAPH的其他部门抽出时长来看看这两个幻灯片。尽管我们不能确定述及关键技术何时可以商业性化,但我们确实坚信,与的社区倾听它们将减缓背书昂距辨识和投影关键技术的演进。SIGGRAPH是一个持有大量多才多艺的其他部门的的社区,即便只有一小部分核心成员将他们的重心转移到述及关键天都,这都都能进一步VR/MR开发出以致于好的感官领略。对于SIGGRAPH之外的其他部门,我坚信尽办法他们很难从我们这支小制作组在不断再次进一步解决问题贯穿接口和软件包的艰巨关键天都的似乎中会得到启发,并与以致于相当多的的社区发布新闻倾听。我同时坚信尽办法他们都能对打算解决问题的实际疑虑感到好奇,亦即为仅有VR和新兴的投影MR领略制作以致于好的感官特性。”

世人一提的是,在被问及这项数据分析在主导AR/VR服务业向上演进之外造就着什么造就作用,以及对于质疑/质疑这项数据分析迄今都没电子元件产品化时,Douglas Lanman给出了以下回应:

这个疑虑太像反问披背士乐队和滚石乐队哪个以致于好?我的意思是,对于服务业而言,数据分析实验室和在电子元件产品制作组的兼职之间不存在一个十分相似的区别于。选择其中会一种职业对你的本赛季有利有弊。

对于辨识系统会数据分析制作组的核心成员,我们决定探求服务业的第一线。有了一支小小的数据分析制作组,我们可以为任何formula_的新方建立少量的本来。但我们才会承认,本来机中会的大多数就此都不都能在我们一些公司或其他地方找到成商品电子元件产品的种系统。有些本来只能大规模原材料;有些本来借此解决问题的疑虑并不最主要,没法证明可以在电子元件产品外观上,载重量,成本或功率之外为其动手出取舍;还有一些本来能够首先准备好其他几关键技术未成熟。

以昂距为例。我们首先从20世纪90年代的博士论文中会了解到这项关键技术,然后我们从2015年开始数据分析,并于2018年首次发布新闻问道它。即便是对于那时候的电子元件产品,这都将是一个不间断的过程。在这段时长里,我们见证了Oculus作为主营初创一些公司的崛起,并就此发售了三代主要的背显,每一代都是在上一代的基本上演进起来。电子元件产品制作组能够背着商业性顾虑快速再次以前进,而数据分析制作组持有这样一个特权:顾虑下一代的可能会,而不是今天能够什么。数据分析只能控制电子元件产品制作组何时选择一项关键技术。同时,如果我们打算解决问题的是他们不都能立即导致的关键天都,他们可能会能够准备好很长的时长,直到他们没坚信到能够一个我们早就结构设计好的减少效率。

所以,作为一名数据分析现代科学数据分析兼职了据统计二十年的时长后,我对这一点有了并不不同的观点:数据分析的主要法律责任是声称未定型的电子元件产品。只不过没法建议昂距或解决问题感官通衢调节冲突。只不过没法建议波数投影或也就是说投影。我们首先构筑这种幻灯片是为了向我们自己(然后是我们的电子元件产品制作组同事)展示出述及疑虑是世人关注的,而我们今天打算与以致于相当多的SIGGRAPH的社区一起动手这件事。

我们问道新兴的辨识关键技术早已有据统计十年了,比如昂距。我们不闻道这个服务业什么时候都能把这种关键技术应用到电子元件产品中会,但我们有自信,这种幻灯片将说服大多数人,向其证明述及关键天都世人解决问题。我们非常期待听到SIGGRAPH与都能者对述及关键天都的观点,以及我们驳斥的两种关键技术减少效率。

先是说一下,以致于好的乐队或许是披背士,因为他们常常愿意想法人所。

吃什么药可以治疗关节僵硬
睡觉打鼾吃什么药有效果
民得维和先诺欣哪个好
精道异常
感冒嗓子疼用什么药
友情链接