2017年2月6日

IKinema LiveAction 和虚幻引擎:实时虚拟体验的强大组合

作者 Siobhán Hofma IKinema

若能够成功地使受众在虚拟体验中深信不疑,全情投入,对于虚拟领域的创建者们而言,堪称终极胜果。当今完美的实现示例是利用引人入胜的叙事,动态的环境,还有非常重要的角色。角色展现出无限的真实度和可信度,这对于与故事中的角色建立情感联系而言是必不可少的元素。

因此,当针对媒体领域(例如,电视广播、虚拟制作和艺术)的项目简介能够交付现实可信的角色时,许多角色可能已经依赖于我们在 UE4 中的 VR 和虚拟制作技术 LiveAction 来产生一系列多样化的前沿实时虚拟表演。

什么是 LiveAction

Ikinema 的核心技术是强大的全身 IK 解析程序,它能够交付最自然最可信的 3D 动画角色动作。借助 LiveAction 软件,可以使用动作捕捉摄像头实时捕捉演员的表演,然后通过 LiveAction 立即将数据传送到虚幻引擎,使用 ACP 过滤器自动清理数据,然后完美地将数据重新定位到虚拟角色(零延迟)。最终输出是从演员到角色的连续的、不中断的自然动作,强大的高效实时流程为动画团队节约了不可估量的时间和精力。

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FIKinema_LA3_ACP_770-770x616-ebbb7a5592c2c6d7d167f0776def4c9d36b8473b

动画清理流程 (ACP):根据地表地形自动更正和调整数据,消除地表陷落和打滑,在实时表演期间呈现完美动画

 

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FIKinema_LA3_retarget_770-770x397-b323614c1fc775d4bcf4bad3e48845150086d776

从源对象到人类和奇幻生物实现准确的实时重定位

 

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FIKinema_retarget_770-770x455-c50127842d66b334362b7c843521836163365520

LiveAction 能够准确地解析不成比例的角色

 

通过将 LiveAction 与虚幻引擎结合使用,他们创造出了迄今为止世界上互动性最强最真实的一些虚拟体验。

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FMr-Monopoly2_770-770x514-938c41a147d55f353686e33e8812443ec9d406b5

图片:孩之宝公司 | Facebook

 

孩之宝公司,Facebook 直播:宣布推出《大富翁终极银行》游戏,从演员在工作室中的表演捕捉动作,借助 LiveAction 这一桥梁,将 MoCap 数据直接重定位到在卡通舞台上移动的大富翁。通过与虚拟引擎和其他若干技术并行运行,LiveAction 让大富翁活灵活现,产生现实的言谈举止,展现出令人信服的表演,并且在与粉丝的实时问答对话中,坚不可摧的流程给予团队极大的信心。

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FGloboTV_RioOlympics3_770-770x433-18ceb96a3cee7756243775bab041ccefb21865f1

环球电视台,2016 年里约奥运会:LiveAction 和 UE4 为环球电视台团队提供了完全可靠的实时流程,将捕获的运动员数据传送并重定向到动画人像,以便在整个里约奥运会期间在巴西全国范围内直播。在实时序列中,真实的主持人可以分析比赛回放,四处走动,并与虚拟运动员和虚拟运动场环境互动。

 

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FHellblade_03_770-770x433-8a34eec1246693745bb3947a28f432aa4e22db87

Ninja Theory《地狱之刃:塞娜的献祭》:LiveAction 在无缝交付与演员(现场)完美匹配的行为方面发挥了作用,使用前所未有的先进特效技术,为虚拟的塞娜角色产生令人信服的人类动作(屏幕上)。这场演出直接在现场观众面前展现,赢得了 SIGGRAPH 2016 最佳实时图形与交互奖

blogAssets%2F2017%2FFEBRUARY+2017%2FIKinema+LiveAction+3.0+and+Unreal%2FThe-Met_770-770x520-8c38fe00fc29d9e0b209a8c42853632a69dd3a07

纽约都市博物馆,The Return:一件以数字方式重现亚当的互动艺术品。Tullio Lombardo 创作的具有深远影响的雕塑结合了数字人偶、动作捕捉和实时动作。参观者可以向屏幕上的数字亚当提出问题,演员在另一个舞台上表演并回答观众的问题。

特色


LiveAction 主要功能

  • 多个角色的实时动作捕捉传递和解析,且零延迟(例如,在中等规格的 CPU 上最多处理 12 个角色,在更强大的处理器上可以处理 13 甚至更多角色)
  • 支持 OptiTrack、Vicon 和 Xsens 动作捕捉系统
  • 支持联合重定位和刚体解析(仅限 Facility 和 Studio 版本)
  • 动画清理流程 (ACP) - 自动实时更正 MoCap 数据,例如噪音、抖动、脚滑、地表陷落
  • 专用于虚幻中的完整流程设置的 UI
  • 解析相似或不成比例的角色

 

LiveAction 3.0 新增功能

  • 自动骨骼映射
  • 模板编辑器 - 自定义名称匹配
  • 骨架与目标架构的匹配
  • 改善了 ACP 的工作流程
  • 通过 MoCap 流协议支持自定义 MoCap 系统(基于 VRPN)
  • 快速设置 - 只需数分钟即可看到结果

 

因此,下次简介将会看到如下内容:


项目:虚拟体验
交付日期:啊… 昨天
简介:令人大开眼界的角色动作。未超预算。未超时间。MSL(最小压力级别)
自我备注:下载虚幻引擎并联系支持 Support@IKinema,这样我们才能帮上忙!!


IKinema LiveAction 3.0 现有适用于 Windows 平台的版本,并随附单机版和浮动许可证。当前在售的三个许可证级别 - Binary、Facility 和 Source。请访问 Ikinema 以了解更多信息。