Magnopus用虚幻为Amazon连续剧《辐射》创造逼真画面

由Magnopus/Kilter Films/Amazon MGM Studios提供
2024年5月13日
十多年来,技术与创意工作室Magnopus始终扮演着行业先锋的角色,致力于构建独一无二的娱乐体验。

从沉浸式VR和AR体验,到虚拟制片的各个环节(包括摄像机内视效、虚拟美术部门以及LED摄影棚操作),身为虚幻引擎服务合作伙伴的Magnopus深受当今顶尖电影制作人和品牌方的信赖,他们不断突破技术边界,只为创造真正令人难忘的内容。

近期,该工作室与Jonathan Nolan和Lisa Joy的Kilter Studios紧密合作,为Amazon Prime Video的热门电视连续剧《辐射》进行虚拟制片。我们采访了Magnopus虚拟制片总监AJ Sciutto,探讨为了利用ICVFX将这个反乌托邦世界生动呈现出来,他们所采用的创意和技术流程;虚幻引擎能够提供的实时灵活性;将虚拟制片技术与35毫米胶片结合使用的方法;等等。
Magnopus何时将虚幻引擎加入了工具箱?

从2018年起,在《曼达洛人》开拍之前,我们就开始围绕虚幻引擎构建虚拟制片工具。我们与Epic团队合作,着手打造了一套世界顶级的工具集,使创作者能够进入虚拟世界,通过虚拟镜头讲述精彩故事。ICVFX是我们工具箱中的利器之一。从LED墙上的精美影像中,你可以看出,在Magnopus卓越软件工程团队的配合下,nDisplay与虚幻引擎将发挥强大的力量。

Magnopus何时参与了《辐射》的制片,你们在这部剧集的虚拟制片中担任了什么样的角色?

2020年,在一个研发项目中,我们与Jonathan Nolan及Kilter Films团队有过紧密合作。2021年底,我们再度携手,共同参与了《西部世界》第四季的制作。在《西部世界》的制片过程中,我们开始初步讨论《辐射》项目。当时,已经写好的剧本只有试播集,我们在项目中的角色更像是创意部门的领头人。

我们对虚拟制片技术在整部剧集中的运用提供了创造性的意见,并与制片人合作,将剧本拆分成最能从ICVFX中获益的场景和环境。最终,我们确定了四个场景环境,分别是33号避难所中的农场场景和避难所大门场景、4号避难所的自助食堂环境,以及位于格里菲斯天文台内的新加州共和国基地。此外,对于所有发生在垂直飞行机中的剧情而言,LED拍摄流程将是理想选择。
随后,我们与Howard Cummings和美术指导Laura Ballinger合作,确定哪些布景元素应该用实物搭建,哪些通过虚拟方式构建。这些决策对光照和视效有着重大影响,因此我们借助概念美术图和故事板进行协调,统一两个世界,并准确界定真实与虚拟的过渡边界。

这个决定中的关键部分在于找到实体布景的终点和虚拟布景的起点。更进一步,是要区分出3D虚拟世界的终点和绘景的起点。我们的绘景画师Frank Capezzuto III和Rocco Gioffre设计出了方案,使得我们能在全景镜头中充分利用LED墙的优势。依靠他们的设计,我们能够采用“遮蔽式舞台”方法,这尤其适合LED拍摄。
为《辐射》构建LED摄影棚的过程是怎样的?

我们首先协助了LED摄影棚的初步设计。我们的目标是设计一个舞台,既能让影片制作者利用曲面LED摄影棚带来的光照优势,又能通过平面墙体的直线部分创造灵活性,便于拍摄较长的步行和谈话场景。

我们的U形舞台设计成为了最佳选择。我们最终建造了一面宽75英尺、高21英尺、长约100英尺的LED墙。接下来的挑战是找到能容纳如此庞大的LED摄影棚的舞台。那时,符合条件的舞台屈指可数,正是在这样的背景下,Manhattan Beach Studios(MBS)的Jeffrey Soderberg和Chris Cox挺身而出,接受了这项任务。

他们与我们以及Fuse Technical Group的团队(由Mitch Lathrop和Koby Kobylko领导)合作,针对制片的具体需求,设计并建造了LED摄影棚。最终,我们在长岛的贝斯佩奇建成了配备市面上最先进技术的LED舞台,它采用模块化设计,非常灵活。
在计算方面,Fuse Technical Group也出色地设计了服务器机房和舞台的视频/数据分配系统。他们在洛杉矶的一个标准集装箱内定制了服务器机房,然后运送到纽约。主LED墙所需的12路4K输出以及其他活动墙的6路4K输出全部集成在这个服务器机房中,同时还有六个操作员工作站位于任务控制中心,通过光纤与各自的设备相连。

我们选用了Roe BP2 v2s作为LED面板,Brompton Tessera SX40s作为处理器,同时采用了Stype RedSpy进行摄像机追踪,Stype Follower System进行对象追踪。由Fabian Flores领导的机电一体化团队设计并3D打印了Follower System的LED信标安装支架,供我们的活动墙使用,使它们能够作为虚幻引擎中可实时移动和重新配置的动态投影表面。
舞台搭建完毕后,在Lily Pitts、Guillermo Quesada和Ross Rosewarne的领导下,我们的工程团队承担了舞台调试工作,在首次拍摄前,确保所有软件组件都能与硬件协同工作。硬件就位后,我们建立了一个内容管理系统,用于从远程团队成员那里拉取VAD更新,并将图像推送到LED墙。

我们利用虚幻引擎和nDisplay渲染场景,并通过LiveLink将RedSpy数据实时同步到引擎中。在拍摄过程中,我们使用镜头试拍录制器捕捉跟踪数据,并通过编写定制软件,将这些数据整理成USD格式,以便导出给Jay Worth和Andrea Knoll指导的视效团队。

在这部剧集的制片工作中,最大的挑战是什么?

最大的挑战在于使用胶片拍摄。毫无疑问,胶片拍摄为剧集带来了独特而美妙的审美效果,它柔化了细节,突出了艺术的粗犷感,创造出了层次分明的废土世界。如果这部剧集采用数字方式拍摄,整体感觉会大不相同,因此,摆在我们面前的问题从来就不是要不要在LED摄影棚中使用胶片拍摄,问题只有如何实现。
我们在一年前曾使用胶片拍摄过影片,积累了使用Arricam同步盒并将同步锁相推送到摄像机的经验。由于摄像机上没有全分辨率的数字监视器,因此我们必须发挥创意,非常精确地调整LED墙上的画面效果。

我们的解决方案是将剧集的胶片LUT应用到Sony Venice摄像机的输出上,以此作为参考,调整光照,并结合OpenColorIO与虚幻引擎的内置色彩分级工具,完成色彩匹配工作。对于每次光照变化,我们都会使用色谱仪测量LED摄影棚中的场景色温以及前景布景光照色温,确保二者相匹配。

在《辐射》的虚拟勘景中,虚幻引擎提供了怎样的帮助?

在《辐射》中,由于我们的虚拟布景完全在虚幻引擎内构建,因此能够在整个创作过程中充分利用虚幻引擎的所有虚拟制片工具,其中就包括虚拟勘景工具。这些工具能让影片制作者进入VR环境,进行技术勘查,并最终布置拍摄布局。

他们能够利用这些工具,精准定位摄像机和角色,甚至实时通过镜头拍摄。然后,我们可以保存这些信息,并据此生成环境热图。这使我们能够确定布景中对故事最为关键的区域,确保我们将创作精力集中在这些区域,优化光照并增强视觉保真度。

了解这一点对我们后续的优化工作也有帮助作用,因为知道了拍摄的方向,所以我们可以用模块化方式分割场景,这样一来,对于那些计算成本高昂的布景元素,当它们不出现在摄像机中时,我们可以将它们隐藏起来。

可视化团队在Kalan Ray和Katherine Harris的带领下,在虚幻引擎中为所有布景构建了1:1比例的3D版本(甚至包括那些原本只计划以实体装置形式出现的元素)。这意味着当影片制作者想要布局场景时,他们不再局限于虚拟资产,而是可以创建整个场景的可视化效果,构建富有意义的镜头,为参与剧集制片的各个部门提供指导。

从制片前期到现场制片,再到后期,请向我们介绍一下你们的工作流程,以及你们如何在整个制片过程中确保创意方案的灵活和随机应变。

制片前期着重于规划与可视化。为LED摄影棚确定布景后,我们的可视化团队便着手工作。创意团队在Craig Barron的领导下,与视觉效果和美术部门紧密合作,确定特定布景所需的实体布局与虚拟空间,与此同时,可视化团队也已着手展开节目的技术可视化工作。

为了有效把握虚拟影像与现场构建之间的界限,我们需依据实际舞台尺寸展开工作。因此,我们在长岛贝斯佩奇建造了等比例的实际仓库模型,并确保LED墙的实际尺寸与该模型相符。这不仅有助于我们规划剧集的创意方面(哪些角度和镜头需要借助LED墙拍摄),还使我们能够确定特技团队的吊点位置、顶灯安装位置,甚至是虚幻操作台的摆放位置。

此外,这个过程还以意想不到的方式为我们省去了不少麻烦,例如,在这个过程中,我们发现实体门的尺寸过小,无法让垂直飞行机的某些部件通过!所有人都很高兴能及时发现这一问题,并有足够时间找到解决方案。
在创意可视化工作方面,我们的虚拟制片监制Kathryn Brillhart和Kalan Ray与各分集的导演合作,完成了一些较复杂场景的可视化布局。我们的虚拟制片主管Kat Harris设置了初始布局,并集成了多用户系统,使影片制作者能够与我们的动画师一起投入工作,并实时调整场景元素。我们还以同样的方式对菲利镇场景进行了可视化处理(尽管我们最初并未打算将此用于LED摄影棚拍摄),以帮助规划一些后勤上更为复杂的拍摄日程。

我们与分集导演Wayne Yip、Clare Kilner和Fredrick E. O. Toye合作,对位于格里菲斯天文台的新加州共和国基地以及4号避难所的餐厅进行了分镜规划,为他们将要拍摄的内容创造空间情境感。为了充分利用LED摄影棚的效果,我们需要将通常不会在预演阶段看到的一些场景(如对话场景)转化成可视化画面,这有助于我们将故事中的奇幻元素带入镜头。Lucy和Maximus不仅仅是坐在野餐桌边用餐,他们更是身处一个巨大的地下核动力避难所中——影像应该支撑起这种叙事构想。

在LED摄影棚的拍摄日,我们的现场制作人Billy Bonifeld和Devon Hubner确保了我们能够与现场的每个团队紧密合作。当我们将虚幻引擎输出的DMX光照信号发送到舞台上超过150台Arri Skypanel设备时,我们的创意技术专家Addison Herr负责构建和整合这一光照输出,使之与灯光师团队中调光板操作员的工作紧密配合。

我们配备了完全铰接的LED活动墙,以填补在极端角度拍摄时镜头范围内的任何空隙。我们的虚拟制片机电工程师Fabian Flores和虚拟制片硬件工程师Julio Salcedo与摄影器材部门合作,精细调整了这些设备的运转方式和位置,确保所有人的安全。我们还与施工团队合作,确保在正面拍摄发光物时,垂直飞行机驾驶舱中使用的有机玻璃不会产生任何扭曲或伪影。

我们与视效、美术及光照部门展开了非常紧密的合作,确保我们的环境拥有尽可能高的保真度。在与现场VAD美术师(Sarah Hudson Semple、Sidney Olluyn、Tony Kwok、Kellie Brewart、Liesbet Segaert、Hugh D. McCullom和Lisa Barber)一起审查了LED墙上的内容后,虚拟制片制作人Gabriel Blake和Andrés Martinez与来自美术、视效和光照部门的主管及负责人一起,协调了内容审查工作,以确保每个人都对环境制作的进展具有一致的了解,并确定需要协助的地方,为达到最高保真度提供保障。
每个团队都为显示在LED墙上的最终影像贡献了大量的支持,视效团队分享了布景元素、环境和资产的激光雷达扫描数据。Ann Bartek(LED摄影棚内所有布景的专属美术指导)提供了构建实体布景的确切材质、颜色和纹理,以便虚拟场景构建能够与之匹配。

拍摄日当天,我们的虚拟制片监制与分集导演展开了协调工作,为特定方向的拍摄做好了LED墙方面的准备。当摄像机设置完毕并进行追踪后,虚幻操作员将帮助确定在墙上渲染时摄像机视角的优先级,并与摄像部门一起寻找视角,最大限度地减少视锥体重叠,并尽可能地提高追踪保真度。

例如,我们与Steadicam操作员合作,寻找追踪设备的安装位置,使它不会干扰拍摄,同时确保传入的数据干净且准确。Berto Mora、All Of It Now优秀的虚幻团队和摄像部门及摄像器材部门紧密合作,随时解决出现的问题。

我们的虚拟灯光师Devon Mathis,还与专门负责LED摄影棚的摄影指导Bruce McCleery以及各分集的摄影指导合作,逐个镜头地调整了LED的nit值、白平衡和色彩值,使它们与场景的其他部分保持协调。这项工作基于前期制作阶段,当时,我们的光照团队使用虚幻引擎预先通过可视化技术确定了每种光照设置在各个环境中的效果,并规划了现场光照的过渡。

让专门的LED摄影棚摄影指导与分集摄影指导进行协作,可以带来哪些益处?

Bruce McCleery是我们专门的LED摄影棚摄影指导,负责4号避难所、格里菲斯天文台和垂直飞行机布景中的ICVFX工作。这位才华横溢、尽职尽责的摄影指导在光照效果准备日前后帮助调试内容,与我们的虚拟灯光师Devon Mathis合作,推动了制片进程,这为我们积累了非常有建设性的经验,而他的工作也直接转化成了精美的效果。我们建议在今后的大型ICVFX制片项目中,特别是那些进度较快、剧组成员和导演方向有时变化较多的分集制片工作中,都配备一名专门的LED摄影棚摄影指导。
同时,我们还非常幸运地得到了杰出制作人Margot Lulick的大力支持,她负责管理剧集后半部分的制作。她确保人们在拍摄过程中对LED部分给予了恰当的关注。对于制片团队的大部分成员而言,ICVFX是一个全新的领域,但Margot和她的团队花时间学习了这一流程,确保我们能够发挥创意,利用LED摄影棚的优势,在其中高效地拍摄。

LED摄影棚既是视效工具,也是故事情节的组成部分,请描述一下它在这部剧集中发挥了怎样的独特作用。

这个故事本身就非常适合采用LED摄影棚技术,因为在剧中,一台Telesonic投影仪在避难所内模拟出了内布拉斯加州玉米田的景象;因此,LED摄影棚不仅作为技术手段被采用,还成为了剧情的一个亮点。这使Jonathan Nolan和剧集制作人能够在拍摄中体验到灵活调整时间的乐趣。
在玉米地的婚礼场景中,监督官的一句台词提示了从黄昏到夜晚的转变,镜头中出现了月亮升起的动画效果。同时,在33号避难所与地表居民的战斗中,我们还可以在墙上展示精美的特效元素。当投影设备遭到枪击时,我们的Houdini团队成员Justin Dykhouse和Daniel Naulin设计了一种胶片燃烧效果,这种效果逐渐扩散,最终覆盖整个屏幕。

我们搜集了胶片燃烧的参考素材,针对20世纪50年代胶片种类及其各自的独特燃烧模式展开了网上研究,从而创造出了一种逐渐蔓延至避难所三面墙的迷人效果。在构建这一特效时,我们意识到在片场环境和在电子游戏中构建特效的要求类似:我们希望状态间的转变在预先确定但同时又具有创造性和灵活性的时间点发生。

这样一来,制片就不必受限于线性特效元素的固定时序,而是能够根据演员实际表演中的信号,灵活做出响应,这是在虚幻引擎中工作为我们带来的一个独特优势。
为什么采用实时3D工作方式对于这个制片项目至关重要?

虚幻引擎赋予了我们灵活性,使得团队能够在制片前期阶段对布景做出创意调整。由于之前与该制片团队合作过,我们知道在实地拍摄时,需要灵活应变,并且如果需要的话,能够在最后一刻对光照或布景设计做出调整。

实际上,在拍摄避难所大门布景时,有人向我们的团队提议,当Lucy走出电梯时,开启灯光,以展示环境全貌。我们的VAD主管Devon Mathis与外观开发兼光照监制Jeremy Vickery迅速制定了计划,在午饭前就将解决方案集成到了新的关卡中。然后,他们将该关卡加载到了布景中,用来拍摄场景的开场镜头。同时,他们还实现了镜头中的动态光照变化。这在预渲染内容中是不可能实现的。
同样,在拍摄的最后一天,制片方向我们提供了一个拍摄最终集片尾预告片的机会。我们利用环境光混合器迅速创建了一个简单的场景关卡,照亮和拍摄穿着动力装甲漫游沙漠的监督官Hank。得益于系统的灵活性,我们在不到十分钟内就完成了场景构建并将其投射到了LED墙上。

虚幻引擎在计划和安排拍摄日程方面发挥了哪些帮助作用?

在正式拍摄前,我们会在时间表允许的情况下,尽可能多地做光照准备工作。在这些日子里,我们会利用布景光照调试LED墙的输出,并使用剧集中的摄像机和胶片拍摄结果。我们会使用摄像机的曝光设置以及虚幻引擎的手动曝光工具对这些测试分级。

这些测试的结果使我们能够衡量数字参考摄像机与实际胶片在何种情况下出现不同步,以及我们可以做出哪些调整,确保能够在各种光照条件下让一切内容保持美观。对于这类工作,通过使用虚幻引擎中的Lumen,虚拟光照能够取得和现场物理光照同样的效果。通常需要在多个关卡中对不同光源进行烘焙才能实现的效果,如今可以实时完成。

此外,实时布景让影片制作者有充足的机会在开发初期就对构图、光照和拍摄布局做出创意决策。助理导演甚至能够利用它们,通过可视化方式了解大型设备如何进入片场,以及如何布置,以便规划拍摄日程。

玉米田中的33号避难所农场布景采用对称结构设计,因此,当我们需要转身拍摄另一个方向时,仅需移动少数几件布景。我们通过虚拟方式将环境旋转了180度,来拍摄避难所内部。在整个LED墙制片阶段,我们达到了99%的正常运行时间,仅遇到了一次9分钟的延迟。这让剧集制作人和助理导演充满信心,充满干劲地安排LED摄影棚内的拍摄工作,因为他们知道Magnopus、Fuse和All of it Now(均为虚幻引擎服务合作伙伴公司)的团队能够胜任这些任务。

负责这个项目的Magnopus团队有多大规模,有多少美术师使用虚幻引擎工作?

有37名Magnopus工作人员参与了这一季的制片过程。19名美术师负责制作虚拟布景,7名操作员负责运行LED墙的虚幻nDisplay系统、整合摄像机追踪,并程控光照系统的DMX数据。团队的其他成员包括软件工程师、创意指导和制片监督,他们也都使用虚幻技术。
虚幻引擎中是否有一些特别重要的功能,帮助你们将这部剧集的画面打造得栩栩如生?

Lumen是虚幻引擎中最关键的部分,《辐射》的成功离不开它。在放弃烘焙光照后,我们的拍摄现场停机时间显著减少,并且能够与摄影指导一起,通过迭代实时修改光照,这进一步增强了我们创意审查的效率。

探索虚幻引擎在电影和电视中的应用

塑造迷人的角色,讲述不为人知的故事,或者,让观众自行探索一个全新的世界。虚幻引擎为你提供了前所未有的创意控制能力,让你掌控整个制片流程。

同类博客文章


新闻

通过游戏动画示例项目获取500多种免费动画

在这个示例项目中,探索运行运动匹配功能所需的一切,它包含数百种免费的3A级高质量动画,可用于启动项目或进行前期制作。

新闻

虚幻引擎5.4现已发布

该版本推出全新功能与改进,将大大助益各行各业的游戏开发者与创作者,其中包括我们曾用于构建和发行《Fortnite》第五章、《Rocket Racing》、《Fortnite Festival》以及《LEGO Fortnite》的内部工具集。

Lumen

《松鼠遇到枪》如何从恶搞测试视频变成基于虚幻的轻松动作游戏

了解Eddie Izzard、虚幻引擎和蓬松尾巴如何让《松鼠遇到枪》活灵活现。