上周六(8 月 17 日),在勒沃库森的 BayArena 体育馆举行的德国超级杯足球赛上,德国足球联赛的高管们对沉浸式体验前景感到兴奋不已,他们宣布世界上首个系统演示,该系统实现了高达 10K 分辨率的 VR 直播。
“赛前,DFL 制作和技术合作伙伴 Softseed 的 Stefan Kiwit 说:”这不仅是足球方面的首映,也是世界首映。“当然,我们已经对其进行了测试,但之前我们还没有做过这样的直播。”
Softseed 是一家位于柏林的初创公司,由具有学术和媒体背景的高管在 2023 年初成立。该公司销售三款产品,其中最重要的一款名为 Plaiground,它利用 Kiwit 声称具有突破性的技术,将 360 视频直播流传输到下一代头戴式显示器上。
他说:”每家科技公司都说它是突破性的,但这确实是因为它提供了身临其境的现实生活体验。“
该公司已经建立了一个从捕捉到显示的端到端系统,“保证 ”低延迟(据称玻璃到玻璃的延迟时间低于 35 秒)、90Hz 下 10K 3D 的稳定质量和 10bit 的色深。
其主要价值在于能够以每分钟 1TB 的数据量处理所有这些数据的软件。
该专利解决方案基于一种新颖的 3DIR 编解码器,高管们表示,该编解码器是 MV-HEVC 编解码器的改编版,MV-HEVC 编解码器是 HEVC 的多视图扩展,由 Fraunhofer ISS 开发,Softseed 是其测试合作伙伴。
超级杯上的演示是在 Apple Vision Pro 上进行的,“这是目前唯一能够重现 10K 分辨率的显示器”,但 Kiwit 预计所有主要的头显都将采用类似的面板上市。
他说道:“我们的系统与终端显示器无关,可与任何操作系统兼容。”
实时画面也是立体的。从 SVG Europe 的检查来看,这似乎是通过软件处理的,而不是以 3D 形式原生捕捉的。Loki(发音为“looky”)是该开发商的三款产品之一,据称可以实时将 2D 视频数据转换为原生 3D。此外,Loki 能够将两个独立的 180° 3D 视频流融合成 8K 或 10K 分辨率的无缝 360° 3D 图像。它还使用人工智能计算来编写、加密和调整数据以适应用户的个人播放设备。
摄像系统本身仍在评估中,BayArena 使用了三个不同版本。它们分别是一台 Insta360 8K 摄像机、一台来自中国公司 KanDao 的 12K 360 摄像机,以及八台来自某未指定中国制造商的 360 阵列摄像机。
对此,Softseed 表示,来自该摄像机阵列的馈送在处理之前以 80K(8 x 10K 传感器)的原始速度摄取。
“任何普通相机都无法产生基本信号,”Kiwit 说道。“我们尝试使用现有相机,但世界上没有相机能够满足我们的需求。因此,我们尝试为现有硬件开发软件解决方案。我们已敦促一些硬件提供商改变我们需要做的事情,否则你就无法获得超过 6K 的分辨率。”
他继续说道:“我们的延迟时间不到 35 秒,与 45 秒的广播延迟相比,这已经是超快了,尤其是考虑到我们每分钟要处理 1TB 的数据。这就是为什么这项技术真正具有突破性,因为处理如此大量的数据确实很困难。”
直播是静态的,但观众可以 360 度转动头部。同样令人印象深刻的是,Supercup POC 演示了三个 360 度摄像机位置(其中一个在球门上方和后方的起重机上,另一个在角落)。理论上,用户可以实时切换任意数量的位置。
“你可以想象一下在教练席上你旁边的位置是(勒沃库森主教练)哈维·阿隆索,”Kiwit 说道。
Softseed 还负责比赛期间直播的定制制作。
该系统已在网球比赛中进行了私人测试,将摄像机放置在裁判椅上,还与 LIV Golf 合作。现场音乐会是另一个受到热切关注的领域,阿黛尔显然同意在本月慕尼黑展览中心露天体育场举行的音乐会上举办一场演示,届时 360 度摄像机将同时出现在后台和前台。
Kiwit 对体育、时尚或音乐推广者获得该技术许可的前景充满热情。
来自 Immersiv.io 的沉浸式数据
Softseed 并不是唯一一家在超级杯上展示其开发的沉浸式现实开发商。法国公司 Immersiv.io 与德国足球联盟合作,展示了如何在 Apple Vision Pro 等 MR 耳机上实时观看德甲联赛比赛(2D 格式,取自主播视频),用户还可以与同时运行的 3D 动作模型进行交互。
比如,可以暂停或倒带动作,或点击单个玩家查看统计数据,最引人注目的是,在真实动作播放的同时,在虚拟 3D 模型中走动,就像一组栩栩如生的 Subbuteo 游戏一样。
在去年莱比锡红牛竞技场举行的超级杯上,Immersiv.io 参与了 5G 网络试验,让体育场内的球迷能够试用与 DFL 和沃达丰联合开发的全新体育场内应用程序的功能。
原文:https://www.svgeurope.org/blog/headlines/live-from-the-supercup-softseed-demos-world-first-live-360-10k-stream/
本文来自作者投稿,版权归原作者所有。如需转载,请注明出处:https://www.nxrte.com/zixun/51692.html