您的 iPhone 手机将扫描你的耳朵以获得更准确的空间音频

在昨晚苹果的 WWDC 2022 主题演讲中,该公司宣布 iOS 16 将允许 iPhone 的用户扫描他们的耳朵形状,以创造更准确的空间声音。可能作为 HRTF 实现,由于需要复杂的设备,为消费者创建自定义 HRTF 曾经是不切实际的,但计算机视觉的进步使该技术更容易获得。
图片
对于数字空间声音,在不考虑用户头部和耳朵的独特形状的情况下,“位置”或“3D”声音的精确度是有限度的。
因为每个人都有一个独特形状的头部,尤其是耳朵,所以来自现实世界的传入声音元素会以不同且非常微妙的方式从您的头部跳入您的耳朵。例如,当声音在您身后时,您耳朵中褶皱的精确几何形状会以独特的方式从该角度反射声音。当你听到声音以这种特殊的方式传到你的耳朵时,你就会明白声音的来源就在你身后。
为了创造一种非常精确的数字空间声音,你需要一个模型,将这些因素考虑在内,这样声音就会与你的头部和耳朵形状产生的正确信号混合在一起。
听力学家用数学方法描述了这一现象,并建立了一个名为“头部相关传递函数”(也被称为HRTF)的模型。使用 HRTF,可以修改数字音频以复制人耳独有的空间音频信号。
因此,尽管人们已经对HRTF进行了充分的研究,而且实时应用HRTF的技术今天已经唾手可得,但仍然存在一个大问题:每个人都需要自己定制的HRTF。这需要精确测量每个人的每只耳朵,没有特殊的设备是不容易做到的。
但现在苹果公司表示,它将在其最新款iphone上使用先进的传感器,让任何人都有机会扫描自己的头部和耳朵,并根据这些数据创建定制的空间声音剖面。
苹果并不是第一家提供基于计算机视觉耳朵模型的定制HRTF的公司,但将其内置到iOS系统中肯定会使这项技术比以往任何时候都更流行。
在昨晚主题演讲中,苹果宣布这一功能是即将于今年晚些时候发布的iOS 16更新的一部分。它将适用于带有TrueDepth摄像系统的iPhone,包括iPhone 10等。
但是仅仅有一个准确的耳朵模型是不够的。苹果公司一定是开发了一种自动化程序,来模拟真实的声音与耳朵独特的几何形状之间的交互方式。该公司并没有明确表示这将基于HRTF实现,但似乎很有可能,因为它是空间声场中的已知数量。
最终,这将为iphone带来更精确的数字空间声音(很可能是未来的苹果XR耳机)。这意味着,离你左耳10英尺远的声音听起来更像在那个距离上的声音。
这将非常适合 Apple 产品现有的空间声音特性;尤其是与 AirPods 一起使用时,它可以跟踪您的头部运动,以获得头部跟踪的空间音频体验。苹果的 iOS 和 MacOS 都支持开箱即用的空间音效,它能够获取标准声音并使其听起来好像来自您房间中的扬声器(而不是您的头部),并准确播放声音。
此功能还有另一个潜在的好处。如果苹果允许用户下载他们自定义的 HRTF 配置文件,他们或许可以将其使用在其他设备(例如 VR 耳机)上。