芒果TV在虚拟现实、动作捕捉、AIGC和交互娱乐技术方面探索的经验分享

你沉迷于看的综艺节目cut(片段),很有可能是人工智能生成的。对于这个事实,不少看着千篇一律“小帅小美、注意看”影片解说的观众或许早已知晓。但你可能不知道的是,技术已经在过去短短几年内帮助内容产业走入了更深的领地,早已不止于基于模板生成剪辑影视解说这种程度了。

对于这件事,作为国内内容平台排头兵的芒果超媒或许更有发言权。区别于大家能直观看到的台前的优质爆款内容,技术似乎一直隐身在台后。但在今年,内容产业的技术创新即将走入台前,甚至与内容策划都有了不少结合。

人工智能引爆运营

一个爆款综艺的诞生,在这个时代,除了需要优质内容团队作为基础保障,技术对其的影响已经不能忽视。

5月5日这天夜里,讨论度最高的文娱话题必是芒果TV的重磅节目《乘风2023》,在之后的几天,节目中的各类舞台集锦、33位知名女星的节目互动片段,都成为大家了解该档节目的最佳入口。


在这些海量短视频的制作者中,除了节目本身受众及娱乐媒体外,还有来自芒果超媒自研的AIGC(人工智能生成内容),其生成了数十万条短视频内容。

芒果TV副总经理、CTO卢海波介绍,此类技术投入从整体来看,已在运营宣发层面减少了约50%的人工成本。

在过去,该类内容的大批量站外输出还需借力第三方公司外包,从今年开始,芒果TV依靠自身技术团队就可以完成这一部分的需求了。而通过这些AIGC内容,芒果TV流量获客的成本也节省了约三分之一。

芒果TV在虚拟现实、动作捕捉、AIGC和交互娱乐技术方面探索的经验分享

此外,芒果TV的AIGC在创作能力上也不亚于一个剪辑手。除较简单的舞台纯享、节目自然分段的短视频外,基于用户兴趣的单个艺人镜头片段集锦与互动集锦也都能实现随播随剪,还有更具创造力的各类二次创作短视频也占据了相当大的比例。伴随着AIGC的投入,节目宣发物料甚至比过去与外包公司合作的内容品质更可控,还减少不少沟通上的时间成本

“这项技术在三年前就投入使用,到目前已经很成熟了,基本不用人力再投入。”卢海波补充到。据他透露,目前平台的AIGC内容每天都可以自动生产,大部分内容会在自动生产后通过早已架好的链路直接输送往各类分发渠道,每天全自动化上传的二创视频量可达到上万条

“关于运营降本增效的部分,现在平台各类业务部门都会来找我们‘要效益’。”卢海波告诉记者。作为芒果超媒的技术掌舵人,他管理的AI团队每天都会收到平台内各业务线的需求。广告可以借助AI提高转化收益,会员业务线可以让AI帮助实现更高付费率,不少后期加入的品牌也可以通过AI自动植入他们的商品或LOGO。

“因为传统的人工运营,它总是产能有限的。”

技术负责人加入节目策划会

“过去我们技术团队承担的就是辅助的角色,各业务同事提需求,我们来解决。”卢海波回忆到。但是在今年,这件事有了变化——芒果超媒节目内容与技术的深度共创已经开始。

在正在拍摄的《全员加速中》节目中,这个以内容为王的平台有了用技术秀肌肉的野心

芒果TV在虚拟现实、动作捕捉、AIGC和交互娱乐技术方面探索的经验分享

这款节目在过去几季中的内容形式主要以嘉宾在全国不同场景下的运动竞技展开。在本季,这样的运动竞技会转移到虚拟场景中进行。节目参与者携戴VR头盔在万向跑步机上进行录制,而录制的对象也不仅是嘉宾们的现实模样,还有他们在虚拟世界中的分身。通过技术拉通节目内容与虚拟世界,做到一个内容多种体验,实现内容的数字孪生。这些曾属于科幻范畴的交互场景,现在正走进芒果TV的综艺节目现场。


“使用虚拟场景在任务中就可以去做不可能完成的事,比如你可以一跳跳过一栋楼,跳过一座火山。”卢海波举例道。在卢海波看来,这也是一次彻底的技术团队与节目策划组的共创。


但这还不是全部的技术创新,为了让节目的交互性更足,在节目开播后,技术团队也计划发布可以让观众使用的在线虚拟空间互动平台,芒果TV的用户可以在线上随时随地与节目中的嘉宾竞技排名。


从2023年2月开始,与《全员加速中》节目策划深度沟通就成了卢海波定期事项。每一次参会,技术团队的虚拟现实部、智能算法部等多个团队的成员都要派代表参加,这是过去从来没有的体验。“当时在策划会的时候,我们还提出可以边播出边实时互动,现在这个构想在我们的技术层面也已经做到了。”卢海波补充到。

技术已深度渗透内容策划

技术对于节目流程和策划的影响也开始变得越来越多。比如日前在芒果TV热播的《声生不息·宝岛季》中,节目实现了中国台湾日月潭与湖南长沙演播厅的合作演出。节目中,中国台湾资深音乐人胡德夫在日月潭弹着钢琴与在演播厅的那英一起合唱了一曲《橄榄树》。这次合作不仅有音乐文化跨地域交流的意义,也正验证着芒果超媒在技术上的突破。

芒果TV在虚拟现实、动作捕捉、AIGC和交互娱乐技术方面探索的经验分享

技术创新体现在细节上。

对于传统意义上的两地直播传输,有延迟是肉眼可见的事。直播传输的通用技术有两种,一种是无线传输,一种是有线传输。从技术层面来说,有线传输可以让延迟更少,但要在一台综艺节目中多机位移动拍摄的情况下使用有线传输,多电线交织对于现场拍摄无疑是一场灾难。

而针对音乐类节目,对于音乐合奏这样强调节奏性、不能发生延迟的内容,如果选择使用无线传输,这其中最大的挑战就在于远程直播延迟上。一旦转播发生哪怕1秒的延迟,远程音乐合作都无法实现。

卢海波带领的团队此前基于这个技术难点进行了一次又一次的迭代更新,最终可以使得远程无线传输的延迟达到低于200ms,这种延迟实际上已经无法让观众察觉了。

今年三月,由芒果TV产品技术中心牵头,携手湖南移动自主研发的“光芒”5G密集视音频传输系统,也已被全球移动通信系统协会GSMA认定为全球最具代表性的专题案例在GSMA官网展示。这也昭示着芒果超媒对于内容平台技术探索的前进深度。

芒果TV在虚拟现实、动作捕捉、AIGC和交互娱乐技术方面探索的经验分享

为了让内容的价值进一步放大,芒果TV也将在2024年上线大型节目内容线上互动体验平台,让用户在线上就能体验到芒果TV多款自制节目的内容玩法。

目前,基于《大侦探》节目内容而上线的《森林进化论》线上互动产品已经完成了商业验证。该套产品力求复刻《大侦探》的实景推理节目体验,已授权线下门店使用pad版本,开局超过千场,实现综艺内容输出-线上游戏-线下体验的全新尝试和开拓,让用户线上看综艺的同时,还能通过线下去感受节目同款游戏。今年7月,《森林进化论》也将完成独立app上线,通过运营线上赛事,结合定制衍生综艺同步宣发,这一单项目目标在2023年营收过千万。这些变现方式也都源于芒果超媒在技术端的发力。

基于以上,芒果超媒在技术端已经探索虚拟现实、动作捕捉、AIGC、交互娱乐、内容播放技术革新等多个领域。卢海波手下团队也在过去三年内持续增长至近千人规模。“还需要继续开疆扩土。我们可以做的还有很多。”卢海波感叹到。

卢海波:

技术能延展内容的深度和广度,但不能替代人

在采访中,谈及在未来内容产业中技术的定位,卢海波依旧把其定义为工具。

“AIGC暂时不会替代人工,说一点个人观点,我认为未来也不可能替代。”卢海波直言。在当下,即便芒果超媒的AIGC已经能自动生成基于原创文本的有声剧、帮助策划撰写剧本等功能,但他认为技术永远替代不了优质的、由人组成的内容团队的创造力和表达力。

他认为,技术的发展对不同行业职人肯定有新的要求,但使用技术去降本增效,辅助人类创新才是正道。

“AI只是在学习人去做事,你可以不断训练他,但是他其实也只是把人的能力拉到一个水平线上,是超越不了顶尖团队的。”卢海波如此看人工智能在内容领域的发展。技术赋能内容有无限的前景,优质内容创作团队更具有不可替代性。

版权声明:本文内容转自互联网,本文观点仅代表作者本人。本站仅提供信息存储空间服务,所有权归原作者所有。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至1393616908@qq.com 举报,一经查实,本站将立刻删除。

(0)

相关推荐

发表回复

登录后才能评论