无限王者团完成首个CG级AR舞台，虚拟演唱会还有多少种可能性？

　　全息技术、赛博朋克、奇形异状的飞行器、人类义体……科技的发展催生了人们对未来世界形态的更多想象力。而当游戏IP与虚拟偶像相结合，又能够产生怎样的化学反应？

　　最近，虚拟偶像领域动作不断，虚拟偶像们频频营业，其中，月初一场庆典的跨次元舞台给娱乐独角兽印象颇深。11月1日，在充满科技感的舞台与亦虚亦实的未来场景中，无限王者团的五位虚拟偶像以AR技术同真人偶像宋茜实现了一场令人赞叹的跨次元演出。

　　在先锋感十足的舞台幕后，是虚拟偶像这一本身高度依托于技术水准与团队运作的新兴产业。他们更好管理却也更难塑造，幕后团队需要去不断为其创造表达场景来与观众进行交互，包括耗费大量心力去构思如何在可操控范围内实现最优质的技术手段输出，以及如何传递正确的信息给观众。为此，娱乐独角兽与《镜城》AR舞台技术导演牛文佳及无限王者团经纪团队聊了聊，探讨关于跨次元舞台的想象力与虚拟偶像背后的可操作性。

舞台革新，虚拟偶像的“营业能力”

　　《镜城》舞台上线不久，微博＃宋茜无限王者团＃话题阅读破2.3亿，音源在QQ音乐上线不久，便获得了超过5万条评论，乐迷们在留言区为自己喜爱的偶像们打call，跨次元舞台带来的远不止流量，数据背后，是本次合作舞台的效果呈现和制作技术实力的先锋价值。

　　舞台前期通过动作捕捉完成舞蹈动作和音乐形成影像，现场舞台通过跟踪设备和引擎来驱动这些影像。据导演牛文佳介绍，观众们可以想象成摄像机上架设了跟踪设备，帮助虚拟偶像定位在真实舞台上，摄像机所有的运动通过跟踪系统把5个虚拟偶像的位置和现实舞台精准匹配，也包括宋茜。同时在后台通过引擎的运算，与跟踪设备联动，包括驱动五个虚拟偶像模型的ue4引擎，以及实时合成的ZD引擎，这都是现阶段虚拟偶像舞台的顶级配置。

　　事实上，这次演出的创新点不止于此。首先，为追求丰富的镜头调度以及虚实融合的真实效果，团队运用了6机位的跟踪设备与引擎，保证了大全景、全景、中近景、特写以及大幅度的运动镜头的实现；尤其是五位虚拟偶像与宋茜的近距离队形变化、唱跳互动等镜头，前期经历了多轮动态预演设计推敲，现场导摄团队按照时间码同步的方式精准呈现。其次，是面对室内演唱会的复杂灯光变化及沉浸式大屏等舞美视效，为获得斯坦尼康360度旋转镜头和大范围的摇臂运动镜头的稳定有效的跟踪数据，AR团队针对这些特殊镜头设计了红外跟踪的技术方案，保障完美的镜头呈现。

　　3分钟的舞台背后是团队自去年5月底开始的殚精竭虑。据了解，不包括立项筹备，经纪团队邀请音乐企划人、作曲家、填词人、舞蹈创作人等前期创作工作就用了3个月以上。而从动捕到动画、渲染、现场的跟踪匹配到合成等步骤，牛文佳及团队在2个半月的时间里完成。对于一条长达3分钟的CG视频而言，团队将原本需要半年以上的制作时间大大压缩。

　　这样紧密的时间与巨大的工程量无疑给团队效率提出了挑战。首先，无限王者团的AR模型品质在国内罕见，参照国际标准来说更是属于头部动画资产，这便对后期技术操作提出了更高的要求。这也致使团队在模型阶段便投入了大量时间精力做出判断，包括纠结于“如何在现有技术阶段条件下，尽可能还原质感？”“是否需要为了更便捷的模型渲染效果去牺牲模型品质”等问题。最终，团队花费近3个星期的时间决定坚守模型品质，使用全cg渲染的形式来迎接挑战。

　　其次，在将动捕数据转换为动画数据的运算层面又是一个巨大挑战。牛文佳分享了一组数据：在服装解算完之后，所有的数据呈几何增长，整套数据在渲染前已经达到10多个T、后台运算用了50多台大容量电脑进行实时运算、在渲染过程为了保证无论是面部、服装细节、还是灯光材质的最优品质，更是用了500多台计算机逐帧渲染，平均渲染时间达到了3.5小时／帧。巨大的工程量只为最终呈现的优质舞台铺垫了基石。

　　再者，经纪团队追求5位虚拟偶像实现写实风格，故而对于舞蹈动作的编排非常细致，真人舞蹈演员花费大量时间来实现舞蹈动作的协调性与美感，肢体的动态效果，这也导致这些动作通过动捕转化成数据的时候，又是团队面临的一道门槛。

　　“旋转、跳跃的动作非常快，在测试过程中我们发现，由于动作幅度太大，一些角色的外套会有滑落、穿模的风险。最终我们在可控的时间内，运用了MD和MAYA两套解算方式。MD解算效率更高、能更好还原服装质感，MAYA解算能够将穿模等技术风险降到最低。同时面对大幅度、快节奏的动作，为避免离心力的作用，团队将解算的帧率放慢，将一帧放慢两倍、三倍。”

　　经纪团队负责人小桐介绍，相较于直播流，舞台点播视频更能够清晰呈现模型品质在视觉上的高度还原。这样的挑战更像是一场豪赌，在没有反复调整优化的空间前提下，选择冒险的“一步到位”，这种写实程度的虚拟偶像模型，以3分钟全唱跳的动作复杂度，效果也是超越了市面上绝大多数的AR舞台。

从专辑到演出现场

虚拟偶像跨次元成长史

　　相较于一年前在《创造营2019》决赛的“成团舞台”，这一次的五周年舞台实现了不同维度的升级迭代。团队不仅为无限王者团更迭了一套全新的三维模型资产，还邀请到专业的韩国音乐制作团队、produce101系列的编舞指导，从多个维度全面焕新。

　　相较于这支虚拟音乐偶像团体在一年时间里的“自我完善”，数次成功的跨次元合作案例也为虚拟偶像行业提供了参照范本。纵观无限王者团成团一年时间以来的跨次元合作案例，无论是五周年庆音乐会、与时尚杂志及明星的跨次元合作、还是为《长安十二时辰》演唱推广曲、为电影《紧急救援》演唱片尾曲《迎难而上》等等项目，无论是在音乐领域还是时尚圈层，均有涉猎。

　　官方数据显示，迄今为止，无限王者团共发布11张专辑，QQ音乐粉丝已突破264万。其中，王者荣耀4周年主题曲《千灯之约》评论超40万，为QQ音乐评论数量之最；《Wake me up》作为团队首支单曲，发行首月即获2760万播放量，登上Billboard中国音乐单曲榜，同时也成功登顶QQ音乐内地榜第一；而《长相思》更是首次实现虚拟偶像和电视剧《长安十二时辰》破次元壁的跨界合作。