用于空间音频的虚拟听觉空间 | 苹果专利

近日,美国专利商标局正式公布了苹果公司新授予的55项专利,涵盖AirPods(第三代)的设计和实用专利,以及两项空间音频专利。

其中,根据Apple的说法,空间音频创建了一个3D虚拟听觉空间,允许戴着耳机的用户在观看电影,玩视频游戏或与源设备(例如计算机屏幕)上显示的AR内容进行交互时,精确定位声源在3D虚拟听觉空间中的位置。

一些现有的空间音频平台包括一个头部姿势跟踪器,该跟踪器使用摄像机来跟踪用户的头部姿势。其他现有的空间音频平台在耳机中使用单个惯性测量单元 (IMU) 进行头部姿势跟踪。如果源设备是移动设备(例如,智能手机、平板电脑),则源设备和耳机可以相对于彼此自由移动,这可能会对用户对3D空间音频的感知产生不利影响。例如,在依赖单个IMU的平台中,在转弯的公共汽车或飞机上观看电影等情况下,音频会偏离中心旋转,因为在单个耳机IMU跟踪解决方案中,用户似乎正在转头。

苹果授予的专利涵盖了用于空间音频应用的惯性稳定的虚拟听觉空间。

在实施例中,方法包括:在包括源设备和耦合到源设备的耳机的空间音频系统的头部姿态跟踪器的初始化步骤中,围绕视线矢量旋转空间音频环境床以将视线矢量与环境床的中心通道对齐。视轴是使用源设备运动数据和头戴式耳机运动数据计算的。氛围床包括中央通道和一个或多个其他通道。在初始化步骤中,环境床参考框架与用户头部参考框架的水平面对齐,使得环境床与用户的耳朵水平齐平。第一个估计的重力方向在环境床参考系中是固定的(保持不变)。在头部姿势跟踪步骤中,环境床参考框架围绕视线矢量滚动,以将用户头部参考系中的第二个估计重力方向与初始化期间固定在环境床参考系中的第一个估计重力方向对齐。

在实施例中,中心通道和一个或多个其它通道位于环境床的公共平面上,环境床被配置为5.1音频格式。在实施例中,源设备是移动设备,其呈现与通过三维虚拟听觉空间中的中心通道和环境床的一个或多个其它通道播放的空间音频同步的视觉内容。

在实施例中,估计的视线矢量确定环境床的方向,并且环境床确定用户周围音频通道的位置,使得当环境床的中心通道与视轴矢量对齐时,中心通道被渲染在源设备的估计位置。

下面的1说明了用户姿势更改方案示例。在实施例中,源设备101输出AV内容,包括但不限于增强现实(AR)、虚拟现实(VR)和沉浸式视频内容。图2示出了居中且惯性稳定的3D虚拟听觉空间。图3是用于居中和惯性稳定虚拟听觉空间的系统框图。5A/B/D说明了当用户倾斜头部时,环境床是如何惯性稳定的。


图片
信息源于:patentlyapple

版权声明:本文内容转自互联网,本文观点仅代表作者本人。本站仅提供信息存储空间服务,所有权归原作者所有。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至1393616908@qq.com 举报,一经查实,本站将立刻删除。

(0)

相关推荐

发表回复

登录后才能评论