在这场Eye to EyeVR体验中,观众会遇到一只可爱而又栩栩如生的虚拟兔子,并与其在同等视线高度上展开一次交流。动物的面部表情和对话由演员实时表演生成,这使得观众有机会进行真正意义上的对话。

捕捉动作和表情
Eye to Eye VR体验的成功很大部分源于其成功地将人类品质赋予了虚拟动物。借助FaceWare Live提供的领先面部识别技术,以及通过Noitom感知神经元套装实施的身体追踪技术,演员的每一个细微表情都能在兔子身上真实再现。通过将这些技术与实时渲染中的非凡细节相结合,我们为观众提供了一种独特的情感VR体验。
考虑到项目需要拥有极佳的渲染效果,还需要在虚拟现实中维持高帧率,Demodern的团队最终选择了虚幻引擎。
技术总监Florian Wögerer表示:“虚幻引擎使我们能够实现最佳画面真实感,同时确保画面拥有每秒90帧的流畅体验。

为了尽可能提升画面流畅性,团队使用了两台计算机来运行虚拟体验:一台用于执行移动追踪任务,另一台用于实际渲染。后者使用了两张NVIDIA GTX 1080 Ti显卡,并且使用AFR(交替帧渲染)作为渲染方法。跟踪数据通过安装了SLI(可升级链路接口)桥的交链网络电缆传输到渲染电脑上。
为了制作兔子的模型和纹理,团队使用了大量的软件,包括Maya、ZBrush、3ds Max、TopoGun、Mari、Substance Painter、Photoshop和Knald。毛发是用Peregrine实验室的Yeti精心修饰的,并且使用了英伟达的HairWorks,为虚幻引擎中的实时渲染工作做好准备工作。这个角色大约花费了500小时才制作完成。

为了整合HairWorks和英伟达的另一个接口VRWorks,团队利用免费访问源代码这个优势,对虚幻引擎进行了自定义修改。
Demodern的高级创意工程师Christopher Baumbach表示:“毫无疑问,虚幻引擎的核心优势之一就是它能够提供完整的源代码。这让我们有机会调整并优化引擎的部分功能,实现预期的品质和性能。”
不只是模型
在开发场景时,团队在虚幻引擎中构想、建模并开发了五种不同风格的世界。Demodern的团队使用了虚幻引擎的材质编辑器来实现他们想要的效果。首席3D美术师Daniel Harrison说道:“得益于材质编辑器自身的灵活特性,其既能创建简单材质,也能创建复杂材质,而这点恰恰是让我们实现期望效果的关键因素之一。”
作为体验的核心内容之一,音效由位于汉堡的音效设计工作室German Wahnsinn提供。该团队使用FMOD作为音效引擎,并使用Nuendo编辑音效。演员的声音通过Apollo Twin的音频接口。该接口拥有内置效果栈,允许噪声门控、压缩等设置。此外,体验中还使用了预先录制的音频。

为成功达到项目所需的效果和品质,团队克服了诸多技术挑战,在硬件定制和引擎设置上进行了多次迭代,直至达到最终状态。虚幻引擎允许开发人员逐步构建修改内容,这一点对于迭代过程帮助很大。< br / >
Baumbach说道:“我们能够进行快速迭代,每次修改内容后不必从头构建整个项目,这样,我们便有足够时间来探索克服技术挑战所需的不同方法。”
该体验活动曾在柏林举行的re:publica '18上推出,并在其他一些节日场合和贸易展会上亮相。整个体验过程在一辆卡车上进行,所以不必大费周章即可抵达其它地点。

深入探索易北河
自完成Eye to Eye项目以来,Demodern还在Discovery Dock展馆的一个主要展区中利用虚幻引擎进行内容展示。该展馆是一家位于汉堡的永久性展馆。展示的实时内容呈现栩栩如生的画面,能让观众深入了解汉堡的著名河流易北河,同时还能了解河中最常见的生物。
通过与Dumont传媒集团之间的合作,团队在不到一年的时间里就完成了从初始研究到最终展览的整个项目工作。他们将汉堡易北爱乐音乐厅旁的一片空地改造成了一个沉浸式互动体验场所,其采用的编舞将混合现实、光雕投影和实时数据等独特技术相融合。它将来自汉堡和全球各地的观众带入一个他们之前无法走进的崭新领域,并给他们留下深刻印象。
想要打造属于你自己的难忘体验吗?立即下载虚幻引擎吧。