人工智能的突破可以显着提高Oculus Quest的渲染能力
Facebook AI部门的研究人员提出了一种方法,通过“简单”软件更新为开发人员提供多达67%的移动VR硬件渲染能力。当然,处理AI的发展及其在实际应用中的实现的任何事情都不是“简单”的,但关键是当前的硬件可以通过更新系统软件的正常过程来显着提高性能。
简而言之,UploadVR从Facebook AI研究人员那里发掘了一份文档,该文档提供了一种切实可行的方法来利用“超分辨率”算法从较低分辨率的图像中创建较高分辨率的图像。从实际的角度来看,这意味着Oculus Quest游戏可以以其当前分辨率的70%进行渲染,从而有助于提供更好的帧率和提供更详细场景的机会。然后,超分辨率AI算法将采用较低分辨率的游戏,并创建一个新图像,该图像看起来比原始图像明显更清晰,更详细。这利用了移动处理体系结构的优势来克服明显的缺点。
对于一个依赖于Snapdragon 835移动芯片组(今天已经有三代的芯片组)的较慢处理能力的平台,这对于希望将其PC VR作品移植到Quest的开发人员来说是一个巨大的福音。跨多个平台进行开发比较容易。这不是我们第一次看到这种技术在消费产品中使用。NVIDIA于去年年底在Shield TV上首次推出了AI提升算法,甚至在此之前,谷歌于2018年在Pixel 3的相机上首次亮相了Super Res Zoom。
如果这听起来像是CSI:Miami的一集,那是有原因的。就像任何一个好的科幻概念都变成现实一样,超分辨率算法最初是一个遥不可及的概念,似乎太过难以置信。Facebook的实现与其他同类算法在本质上并没有太大不同,因为它教会机器常见对象的视觉细节,并允许AI想象完整对象的外观。NVIDIA在用于PC的RTX系列视频卡上也采用了类似的算法概念,即DLSS,以提高图像质量,而对性能几乎没有影响。
目前,Facebook并未为此承诺将任何进展提供给Oculus Quest或任何其他头戴设备的时间表。但是,这类更新并非史无前例,当然也不是不需要的。去年,Oculus开发工具包中实现了动态固定凹坑渲染,并在不降低视觉保真度的情况下,极大地提高了Quest游戏的性能。希望这会在不久的将来加入一长串令人惊奇的Oculus Quest更新。