雷锋网觉得为了解决R音效问题,Nvidia这次算是放了大招了。
VR体验的定位音频,一直以来都被认为是体现VR沉浸感的重要部分,它使声音听起来犹如来自真实准确的方向。但是,判断出声音的方向仅仅是沉浸式音频的一部分内容。VR音频下一个要完成的挑战,是让定向音频以现实的方式与虚拟环境进行交互,在音频的作用下,让VR空间感觉更加真实。
目前,定位音频以某种形式,被结合运用到大多数VR应用程序中(有些应用程序运用了更好的音频集成方式)。定位音频能传递出各色声源的方向,但这种传递会忽略掉声音所处的环境。因为我们的耳朵和大脑开始不自觉地辨别混合的声音,这些混合的声音是由于我们身处环境的形态和材质不同,而产生的混响、回声、衍射或更复杂的音频交互。即使没有相应的视觉感受,单是声音也能营造出巨大的空间感。毋庸置疑,要使VR的沉浸感最大化,音频是很重要的一点,而这正是我们引入实物音频的原因。
NVIDIA供图
基于物理空间的音频是虚拟声音在虚拟环境中的一种模拟,包括方向音频、环境形态及材料产生的交互音频。以往,由于这种模拟太占用资源,而无法快速准确地完成实时游戏。Nvidia公司提出了一个解决方案,在他们强劲的GPU上做模拟算法和运行。该公司称,即使在高性能的VR应用程序中,他们的GPU也能实时高效工作。在本文开头的视频中,你就可以仅靠音频感受到场景,并获得场景的物理形态等信息。当然,使用耳机能确保音频的效果;这次演示令人印象深刻,特别是视频末尾,从声源附近环绕的视线变化能展示出遮挡物的位置。
据雷锋网了解, Nvidia 公司今天在2017 GTC会议上发布的计划——VRWorks Audio SDK,是该公司VRWorks工具套件的一部分,用于增强VR在Nvidia GPU上的应用。SDK可以在任意应用程序中构建位置音频,除此之外,Nvidia公司的VRWorks音频也可用作虚拟引擎插件 (我们很快就会看到相同的统一),这为开发人员研究VR的实物音频提供了方便。
该公司表示,VRWorks音频是“唯一的硬件加速和路径追踪音频解决方案,能够实时创造出环境中完整的声学图像,而不需要事先对场景进行了解。当场景被应用程序加载时,声音模型就会立即构建和更新。于此同时,音频效果过滤器也会生成并应用于声源波形。”
VRWorks音频再现了公司的OptiX射线跟踪引擎,它通常用于渲染高保真的物理图形。关于VRWorks音频,系统生成了不可见射线传播声波,能跟踪它从起点到与它交互表面的路径,最终到达听众。
关于GTC 2017更多的详情,可以关注雷锋网的相关报道。此外,美国西部时间5月10日上午9:00 - 11:00,黄仁勋将用2个小时的Keynote阐明今年NVIDIA推动人工智能和虚拟现实的全线产品和战略,大家可以关注官方页面http://nvda.ws/2qQOhGM收看。
Via RoadtoVR