体积视频：3D 捕捉技术在体育和娱乐中受到青睐

在近年来冲击电影和广播制作行业的新技术和新技术的爆炸式增长中，“体积视频”一词可能尚未达到对 VR 或 AR 等的一般形象或理解。但随着 2019 年以来体积项目流量的增加，以及一些旗舰产品预计将于 2023 年推出，这种情况肯定不会持续太久。

什么是体积视频？

所以首先要做的是：什么是体积视频？该技术旨在为视频制作带来深度和新的创意可能性，涉及使用多个摄像机捕捉三维空间。通常，以这种方式拍摄的内容类型可能包括人物、物体或完整的表演。随后，可以使用智能设备、计算机上的 2D 浏览器、VR 眼镜或 AR 显示器重播视频，从而让观众可以从任何角度观看拍摄对象。

迄今为止，体积视频的重要处理和一般硬件要求意味着它的影响范围有限。但就像之前的每一种视觉技术一样，随着处理能力的提高和周边产品生态系统变得更加全面，与捕获和交付相关的成本正在逐渐下降。事实上，这项技术的转折点最快可能会在明年出现。

“后期工具是缺失的部分”

作为目前专注于体积视频解决方案的少数领先创新者之一，Arcturus 由一支创意和执行团队创立，他们曾在 YouTube、谷歌、梦工厂和皮克斯等公司工作过，这是他们的集体功劳。2016 年成为 Arcturus 的业务的起点是：“意识到缺少一个部分，那就是体积视频的后期制作和流媒体工具。这就是他们着手构建的东西，”Arcturus 合作伙伴和营销主管 Piotr Uzarowicz 解释说。

他们的劳动成果是 HoloSuite，这是一个与捕获无关的 SaaS 后期制作平台，提供用于编辑和分发体积视频的工具。“它由两部分组成：HoloEdit，其中包含用于编辑和压缩素材的工具，因此可以将其输出到 [沉浸式创作工具] Unreal 或 WebXR，以及 HoloStream，这是一种适用于移动、网络、桌面和沉浸式耳机的流媒体解决方案。”

Arcturus 还为许多备受瞩目的项目提供咨询和制作工作，包括 Hulu 获得艾美奖提名的“Light as a Feather”Magic Leap 激活和麦当娜在 2019 年公告牌音乐奖上的立体全息图。后一个项目——被称为体积表演的首次现场直播——已被证明在向更广泛的观众传达体积的长期潜力方面特别重要，尽管很明显我们应该期待现场体积制作更多地发生从现在开始经常。

为此，Uzarowicz 表示——而不是抑制它的发展——大流行可能提供了一个机会“让更多的人花时间去了解[这项技术]。另一个有趣的方面是，在体积视频的制作过程中，艺术家独自一人在那个空间里。你真的可以把这些组件分开，所以你可以让拍摄人员在一个空间，演员在另一个房间，而导演则通过 Zoom 远程加入。[体积视频] 很容易适应 [Covid] 限制。”

同时，HoloSuite 工具继续发展，特别强调简化捕获和分发过程。例如，2021 年底的更新增加了对 Scatter 的 Depthkit Studio 3D 捕捉软件的全面支持，使内容创作者能够使用一个管道捕捉、编辑和分发他们的体积项目，从而更容易地为 AR/VR、框架媒体和360 度空间视频。

“体积和虚拟生产相交”

麦当娜/公告牌奖的表演也是 Dimension Studio 的一个里程碑，因为正是在他们位于伦敦的工厂，这位歌手的创意总监 Jamie King 和 Reflector Entertainment 捕捉到了她的四个“角色”——即音乐家、恰恰教练、 秘密特工和新娘。体积捕获的模型和效果通过 Reflector 定制的体积捕获播放器实时回放，并在虚幻引擎 4 中进行高质量回放。由此产生的 AR 性能——还包含云、雨和蝴蝶等特效——是与现场表演一起呈现，包括拉丁歌手 Maluma 和十多位舞者。

Dimension Studio 联合创始人兼联席 CEO Simon Windsor 调查了当前的制作环境，强调了“如今虚拟制作和立体视频的工作越来越多地交叉”的趋势。发现体育被证明是早期采用者也就不足为奇了，体积捕获的无所不包的可能性有助于对球员表现进行详细分析。例如，Dimension 的 Polymotion Stage 被用于制作第 148 届英国公开赛天空体育的自由视角挥杆分析片段，可以对高尔夫球手的挥杆动作进行 360 度全方位检查。一旦高尔夫球手在工作室被捕获，他们的全息图仅在 48 小时后就被用于广播。

虽然体育和娱乐可以说是该领域的领头羊，但温莎表示，有强烈的迹象表明“3D 技术[正在被广泛采用]，从概念可视化到制作和后期制作，无所不包。” 他建议实时体积捕获的显着增加即将到来，而 Dimension 当前的研发重点领域之一是使用体积视频进行“数字人群创建”，它利用了我们过去几年开发的经验和系统。如果你能够拍摄 [人群] 体积，它会给你更多的灵活性，比如改变服装、发型等方面。”

“体积必须与职位的其余部分相适应”

4Dviews 是另一家公司，其体积视频的范围越来越广。该公司成立于 2007 年，目前以 HOLOSYS 体积视频捕捉系统为主导，该系统包括捕捉设备（相机、照明和电子设备）、具有终身产品许可证的软件套件、安装和操作员-客户培训。除了包含用于 Unity3D 和虚幻引擎的插件外，Alembic 格式 (.ABC) 的导出选项使用户能够在 Cinema4D、Autodesk Maya、Houdini 和 Blender3D 中本地导入所有体积视频。

任何创意开始使用体积视频的出发点都是“适应视频现在具有三个维度的事实，我猜这最初看起来有点奇怪！” 首席执行官理查德布罗德布里奇说。尽管如此，4Dviews 的理念始终是使整个过程尽可能无缝：“我们的方法是它必须适应其余的后期制作过程，无论是网络内容、2D 演示还是音乐视频。”

事实上，音乐宣传片以及时尚和艺术界的项目从一开始就对客户群做出了重要贡献。随着市场的发展，对图像质量的期望也越来越高：“自远古时代以来，主要关注的焦点就是图像质量，而且这真的是永无止境的。”

与此功能的其他贡献者一样，Broadbridge 表示 Covid 时代的封锁导致整个行业进行了更密集的开发工作。“突然之间，人们能够更多地关注研发而不是拍摄活动，”他回忆道，并补充说，在 4Dviews 自己的案例中，“我们的工程师有机会尝试尽可能地向前迈进。[在项目方面] 今年我们的表现非常好，我认为整个市场对前进感到更加放心；肯定有很多实验正在进行。”

事实上，Research and Markets最近的一项预测表明，天空是体积视频的极限，全球市场预计将从 2021 年的 15 亿美元增长到 2026 年的 49 亿美元——复合年增长率为 26.9%。除了 volumetric 为体育和娱乐内容提供增强观看体验的能力外，Research and Markets 还列举了零售和电子商务对 AR 的新兴需求以及 AR/VR 生态系统投资水平整体上升等因素。

简而言之，我们似乎仍处于将成为一个巨大的全球成功故事的相对早期阶段。

作者：David Davies
原文链接：https://www.ibc.org/features/volumetric-video-3d-capture-technique-finding-favour-in-sport-and-entertainment/9389.article