虚幻5帮助Aya Nakamura为歌迷创造惊喜

早在二十年前,流行音乐明星就有许多成熟的渠道培养听众群,例如:销售唱片、电台播放、音乐视频和现场演出。如今,歌手和歌迷之间又有了一条激动人心的新纽带——虚拟世界。具有开拓精神的流行音乐明星正在拥抱数字领域,这不仅让现有的支持者感到欣喜,也使明星能够接触到全新的歌迷群体。

Aya Nakamura正是这样一位革新者。最近,在《堡垒之夜》Soundwave系列演唱会(由世界各地歌手主打献唱的一系列音乐体验)中,这位称霸音乐排行榜的法国籍马里裔歌手担任了主唱。
 

最近,《堡垒之夜》的玩家受邀参加一场完全使用《堡垒之夜》创意模式工具集构建的活动。在这次活动中,法国歌手首次在《堡垒之夜》中倾情献唱,带来了一场开创性的音乐体验。

Aya和她的唱片公司Rec. 118(隶属于法国华纳音乐)与XR工作室MADO XR合作,在MetaHuman Creator的帮助下创造了这位明星的数字替身,与此同时,他们还使用虚幻引擎5,为将在体验内播放的音乐视频构建了虚拟环境。

使用MetaHuman创造逼真的虚拟化身

“当我听到这个项目时,我立即意识到,它具有巨大的突破性意义。”MADO XR的创始人、首席执行官兼创意总监Louis de Castro说。

对De Castro来说,Aya Nakamura在Soundwave系列演唱会中的演出完美地诠释了数字世界如何成为歌手的舞台。“我将它想象成一个巨大的游乐场,它不仅可以激发我们的想象力,也能够让我们从不同角度看待演出。”他解释说,“能够参与一个展现元宇宙所有力量的巨型项目,我感觉自己成了一名开拓者。难道还有比这更让人兴奋的事吗?”

对Aya Nakamura和法国乐坛来说,这场虚拟体验代表了一座里程碑——Aya本人也深知这一点。“这次合作让我有机会向世界各地的新老歌迷献上我迄今为止最大规模的演出,”她在活动前这样说,“我迫不及待地想与大家分享我的音乐,成为第一个与《堡垒之夜》合作的法国歌手!”

法国华纳音乐的总裁Alain Veille解释说,通过在《堡垒之夜》这样的虚拟世界中举办音乐体验,歌手取得了难得的机会,让他们能够在歌迷所熟悉的地方与歌迷们相聚。“通过进入《堡垒之夜》这类备受玩家喜爱的游戏,歌手将直接与拥有共同兴趣的歌迷们紧密联系在一起。”他说,“我们从歌迷那里听到,他们对自己喜爱的歌手所做出的一种常见正面评价就是‘我竟然不知道他/她是《堡垒之夜》的粉丝’。”

除了以激动人心的新方式让歌手与歌迷建立联系外,虚拟体验也为繁忙的歌手们提供了一种切实可行的途径,使他们能够一次接触到数百万人。“现场巡演需要跨州越郡,前往多个城市和场馆,相比之下,这种方式为我们带来了更大的灵活性,我们可以随机应变地安排歌手的日程,处理好各种任务。”Veille说。
Image courtesy of Warner Music Group
Aya的团队能够在项目时间表中将这场活动纳入考量,这甚至启发了团队想到利用MetaHuman Creator创造歌手的虚拟化身,在活动过程中使用。“与现场演唱会或巡演中需要真人演出的要求相比,虚拟演唱会的制作工作更加灵活。”Veille解释说。

虚拟世界是乐坛的新前沿。从唱片公司、歌手到歌迷,所有人都在共同探究,这些数字空间将对歌手和歌迷间的关系产生何种意义。

正如华纳音乐集团首席数字官Oana Ruxandra所解释的那样,这意味着他们将与歌手、其团队、其歌迷以及平台一起,携手学习。“在这个与Aya共同完成的项目中,我们试验了新工具,使她能够更全面地为自己建立愿景。”她说。

“例如,这是我们第一次在虚幻引擎5环境中使用MetaHuman工具。无论是动画保真度,还是在虚拟空间中捕捉Aya真实动作的能力,都使我们大开眼界,我们所有人都感到无比激动和振奋。”
 

使用虚幻引擎5创造虚拟世界

MADO XR与音乐及数字行业的优秀资深人士合作,设计了视觉概念、剧本和歌手的虚拟化身。

该团队与导演二人组The Quiffs联手打磨了音乐视频的剧本。巴黎3D扫描工作室Scan Engine负责扫描Aya,获得数字数据,然后,创意数字工作室Shape Shifters将利用这些数据为她制作虚拟化身。Komet Xperience的法国美术师团队也参与了合作,为将在体验屏幕上播放的音乐视频开发虚拟环境。
Image courtesy of Warner Music Group
开发过程的第一步就是扫描。团队拍摄了150多张Aya脸部和身体的照片,用于创建高保真扫描,然后他们将扫描数据传送到了MetaHuman Creator中。通过虚幻引擎最新MetaHuman插件的“网格体转MetaHuman”功能,现在,任何人都可以完成这一流程。“在这个过程中,最具挑战性的部分就是刻画出使她有‘人味’的细节——调整唇色、肤色和脸部阴影,而我们可以在MetaHuman Creator中重现这一切。”De Castro说,“下一步是重新装配面部绑定,让她能够表露情绪。之后,我们会通过动作捕捉制作动画。”
 
Courtesy of Waner Music Group

上面提到的面部绑定重新装配过程现在可以自动完成。De Castro认为,在创造数字人类方面,MetaHuman Creator引领了一场变革。“最妙的部分是,无论是熟练的3D美术师,还是初学者,任何类型的创作者都可以利用它参与到虚拟化身的创作中。”他说,“它容易使用,界面直观,即使是以前对技术一无所知的人,也能够通过它提供的指南塑造一个相当不错的虚拟化身。”
 
Courtesy of MadoXR and Waner Music Group

在传统管线中,要模仿真实人类的面部表情,就必须重新制作面部绑定、动画和骨骼。De Castro很早就接受了数字人类技术,他见证了这项技术已在多大程度上超越了传统管线。“从这种意义上说,MetaHuman Creator确实是一款‘一次性’工具。”他说。

歌手本人的反应是检验团队成功与否的最佳试金石。“当我看到我的虚拟化身时,我真的很惊讶。”Aya说,“看起来如此真实——尤其是动作和姿态。我立刻就认出了那是我自己,这给我留下了深刻的印象!”
 
Aya的演出已在《堡垒之夜》内的虚拟环境中通过屏幕公映。经过Atlas Creative Studios的开发,玩家能够在探索这个虚拟世界的同时体验Aya的音乐。
Atlas的团队尽心竭力,在玩家穿行的虚拟世界中重现了音乐视频CG画面的外观和感觉。见过音乐视频中的数字Aya以及由UE5构建的环境后,通常来说,玩家会期待在《堡垒之夜》中看到的更加逼真的外观,因此,团队必须深入研究《堡垒之夜》创意模式的工具集,将两者更好地匹配起来。
 
Courtesy of MadoXR

“我们制作的很多东西看起来不一定像典型的《堡垒之夜》地图,因为我们必须大量调整光照以及各种不同的东西,使它们的外观与视频中相符。”工作室联合创始人兼首席执行官Michael Herriger解释说,“这就是最酷的地方——你在《堡垒之夜》中,但同时又感受到了不同于《堡垒之夜》的体验,这真让人兴奋。”
 
Courtesy of MadoXR

音乐体验的未来 

Ruxandra称,华纳音乐认为,未来将出现基于超薄头盔设备的超真实元宇宙体验。“这些元宇宙体验将具有持久性、同步性和实时性。”她说,“它们将跨越数字世界和物理世界,提供前所未有的互操作性,充满由广泛内容贡献者所提供的内容,并具备功能齐全的独立经济机制。”

Ruxandra继续说,在这些元宇宙体验中,音乐将成为互动、交流和消费的主要形式。“对我们的歌手来说,能够在身临其境的环境中以可定制的实时方式与歌迷互动,将创造无穷的可能性。”她解释说,“此时此刻,能够在这些未来体验的开始阶段对其进行挖掘研究,我们感到万分激动。这将确保我们为歌手提供必需的工具,使他们成为这些虚拟空间中的权威人物。”

对De Castro来说,《堡垒之夜》完美地诠释了Ruxandra所描述的虚拟音乐体验。“承认吧,没有谁能超越《堡垒之夜》团队,推出更精彩的虚拟表演。”他说,“没有什么派对能与《堡垒之夜》的派对相媲美,当提及制作最出色的游戏内演唱会时,Epic Games也借此树立了‘具有前瞻思维的主办方’这一形象。

“这个平台向我们证明了,如果想将游戏玩家、歌手、美术师和设计师聚集在一起,它将是首要选择。元宇宙已逐渐成为热门话题,而这正是展示数字化现实运作方式的最佳范例。”

    立即获取虚幻引擎!

    获取全球最开放、最先进的创作工具。
    虚幻引擎包罗万象,并提供完整的源代码访问权限,开箱即用,诚意十足。