软件与硬件:VR音频的未来在平衡中徘徊
硬件和软件工程师对世界的看法是不同的。事实上,很多问题都可以用任何一种方式解决,选择并不总是显而易见的,至少在当时是这样。产品设计师一直在解决不那么关键的问题,这些问题既有硬件解决方案,也有软件解决方案。最近的一个例子是,如何为虚拟现实创建逼真的完全沉浸式音频,并随着用户在虚拟世界中移动而无缝调整?各种各样的环绕立体声听起来让人身临其境,但一般情况下,当你与房间里的音箱相对移动时,环绕声不会发生变化,因此这种虚拟体验很容易被打破。
Dirac是一家开发用于优化音频的数字信号处理技术的公司,它认为解决方案是以软件为中心的。该公司的研究人员测量了30个人的头部相关传递函数(HRTFs)。HRTFs编码由于头部、耳朵和躯干形状引起的反射和阴影而产生的声音变化。研究人员收集了数百个HRTF测量数据,指导试用者移动头部,使其与身体其他部位保持相对,并利用这些测量数据计算出一个通用的、动态的HRTF模型。虚拟现实内容产品可以使用这个模型使虚拟环境的声音响应用户的动作,并显示为来自虚拟音频源,即使实际环境只包含两个音箱或耳机。
图片来源:美国专利商标局
哈曼国际(Harman International)的研究人员在最近的一项专利申请中描述了一种虚拟现实沉浸式音频系统,该系统依赖于机器人音箱在虚拟环境发生变化时重新定位自己。
与此同时,音频设备制造商哈曼国际(Harman International)(现在是三星的一部分)已经提出了一个需要大量硬件的解决方案。在一项针对虚拟现实环境的移动音箱系统的专利申请中,哈曼描述了飞行机器人音箱,当用户在虚拟世界中导航时,它们会重新定位自己。该系统包括一个处理器映射的虚拟环境用户的物理环境,”将信息传输到机器人音箱,以使机器人音箱移动到物理环境中与虚拟环境中的虚拟对象位置相对应的位置,并将音频信号发送到机器人音箱。机器人音箱根据音频信号和物理环境中的位置输出与虚拟物体相关的声音。”
哈曼工程师对这些机器人扬声器的运动方式有很多想法,包括车轮、转向轮、滑轮和气体推进。如果没有别的,这样的系统肯定会使观看某人导航虚拟体验更有趣。
原文出自:https://spectrum.ieee.org/view-from-the-valley/at-work/innovation/software-v-hardware-future-of- vr -audio
来源: spectrum