InterDigital 视频实验室元视频组主任兼负责人 Philippe Guillotel 评论了标准在为触觉技术和沉浸式视频提供基础方面的关键性。
随着我们的沟通和娱乐模式不断发展并达到新的高度，无论设备功能和要求如何，更广泛的受众都必须能够获得更高程度的沉浸感和互动性。虽然音频刺激我们的听觉，视频激发我们的视觉，但触觉技术的进步将为沉浸式视频体验增添另一个维度。触觉技术为虚拟和沉浸式环境中的真实感提供了令人兴奋的可能性，可以超越当今设备和屏幕的限制，从而提升和增强连接体验。无处不在的连接（以 5G 的形式）和新兴沉浸式技术的结合可以支持新的体验，从 VR 头显内置的触觉反馈到用户能够感受到触觉的无数设备。因此，通过这种新型感官增强，可以实现更迷人、更真实的虚拟体验。
但通往沉浸式媒体的道路始于对新媒体编解码器和标准的大量研究。这与触觉媒体编码和交付尤其相关：如果没有在标准方面进行重要而基础的工作来首先简化开发，然后支持在全球设备之间交付沉浸式和触觉增强内容，那么任何为基于视频的体验提供新深度和感觉的愿望都将仍然是白日梦。
通过标准解锁新体验
简单来说，沉浸式媒体是三维的，为用户提供每只眼睛一个的视图，让用户感受到深度感，同时包含用户的运动，以鼓励更高水平的沉浸感。
所有这些的关键在于沉浸式视频编解码器。它们允许以高效和无缝的方式传输和使用数据丰富的视频。如果没有它们，许多用户享受的无处不在的 2D（以及现在越来越常见的 3D）体积和触觉增强视频就不可能实现。
到目前为止，MPEG （ISO 和 IEC 内制定音频、视频和多媒体编码标准的工作组）一直是内容创建和服务交付的关键推动者，因为它在描述编码、封装、传输和解码沉浸式和触觉数据的方法方面起着决定性作用。2021 年 6 月，MPEG 发布了征集提案，旨在为未来的触觉标准建立参考架构，将触觉推广为 3gp 和 mp4 等 ISO 基础媒体文件格式和 DASH 等流媒体格式中公认的媒体类型。将触觉数据与音频和视频相结合，尤其是为了实现沉浸式内容，才是实现一致、可靠的丰富感官体验的关键。
消除碎片化：通过标准化合作实现增长
如今，超过 41 亿台设备配备了触觉执行器并具备提供触觉反馈的能力，标准是定义用于提供感官体验的机制和编解码器的基础。因此，有必要培育和扩展标准生态系统，以将简单的触觉增强内容大规模发展为更复杂、更身临其境的体验。
目前，触觉环境是碎片化的，对于内容创作者和产品开发者来说，使用不同的专有方法来传达触觉是一个真正的挑战。这反过来又推高了开发者的成本，降低了采用率。与音频和视觉一样，触觉标准对于确保端到端交付技术所涉及的所有方面都兼容至关重要。
尽管存在这些障碍，但业界正在逐渐认识到设备间互操作性的重要性。标准使业界能够定义和开发捕捉、编码、传输、解码和复制沉浸式触觉体验的基本方法。
此外，沉浸式和触觉生态系统中平台和供应商之间的互操作性只有通过标准才能实现。沉浸式内容的创建、分发以及触觉设备所推荐的解码特性都依赖于标准，以确保触觉端到端交付所涉及的所有方面都得到有效编码和兼容。当然，这些标准的诞生源于标准制定前小组和行业论坛的密切合作，这些论坛的既定使命是限制市场分化和投资停滞，而这些分化和停滞必然会因互操作性差且专有的触觉方法而产生。
提供沉浸式体验
业界已开展大量工作来进一步完善视频处理解决方案，以创造出色的沉浸式视频体验。例如，MPEG 可视化体积视频编码 (V3C) 标准支持通过两种主要编解码器对体积内容进行编码和流式传输的机制：基于视频的点云压缩 (V-PCC) 和 MPEG 沉浸式视频 (MIV)。这两种编解码器都有助于实现增强沉浸式体验，以支持远程学习、娱乐，并越来越多地用于现场体育和电子竞技，从而保证内容可以在各种设备上高效无缝地大规模消费。
与此同时，MPEG-I 触觉标准已被定义为大规模创建、流式传输和渲染触觉内容，其长期目标是将大规模触觉增强沉浸式视频体验翻译和分发给具有不同设备功能和要求的观众。该标准代表着触觉作为一种媒体类型的成熟迈出了重要一步，使其能够发挥作为一阶媒体类型的真正潜力。
沉浸式娱乐的未来
如今，沉浸式娱乐的机会越来越大，尤其是随着内置触觉功能的消费电子产品变得越来越普遍。单凭触觉技术就有可能重塑用户的数字互动，使其更加直观和触觉化。随着行业加大标准化力度，以及更高互操作性的优点变得越来越明显，新的联盟正在形成，以克服设备生态系统碎片化的问题。如果没有标准，行业将无法实现捕捉、编码、传输、解码和复制沉浸式触觉体验的基本方法。它们开辟了通过沉浸式视觉实现更深层次的内容互动的可能性，并为触摸成为数字体验基本方面的未来铺平了道路。
本文来自作者投稿，版权归原作者所有。如需转载，请注明出处：https://www.nxrte.com/jishu/55237.html
