단 몇 분 만에 고퀄리티 페이셜 애니메이션을 제작할 수 있는 메타휴먼 애니메이터가 출시되었습니다!

iPhone과 PC만으로 배우의 연기를 캡처하여 메타휴먼의 고퀄리티 페이셜 애니메이션으로 단 몇 분 만에 만들 수 있다면 어떨까요?

메타휴먼 애니메이터라면 가능합니다!

GDC 2023에서 처음 선보인 이 최신 버전은 쉽고 빠른 디지털 휴먼 파이프라인으로 메타휴먼을 위한 고퀄리티 퍼포먼스 캡처를 제공합니다.

에픽 디벨로퍼 커뮤니티의 새로운 메타휴먼 허브에서 바로 살펴보고, 다른 메타휴먼 사용자들과 소통하고, 메타휴먼 문서를 읽어보세요.

메타휴먼 애니메이터는 iPhone이나 스테레오 헤드 마운트 카메라(Head-Mounted Camera, HMC) 시스템으로 배우의 연기를 캡처하고 수작업 없이 모든 메타휴먼 캐릭터에 고퀄리티 페이셜 애니메이션으로 적용할 수 있는 새로운 기능입니다.

이 새로운 기능을 사용하면, 모든 미묘한 표정, 모습, 감정을 정확하게 캡처하여 디지털 휴먼에 충실히 재현할 수 있습니다. 게다가, 간단하고 직관적이기 때문에 누구나 멋진 결과를 얻을 수 있습니다.

퍼포먼스 캡처가 처음이라면 메타휴먼 애니메이터를 사용하여 실제 연기를 기반으로 한 페이셜 애니메이션을 메타휴먼에 간편하게 적용할 수 있습니다.

이미 퍼포먼스 캡처를 해 보았다면 이 새로운 기능을 통해 기존의 캡처 워크플로를 크게 향상하고, 시간과 노력을 줄이며, 보다 창의적으로 제어할 수 있습니다. 메타휴먼 애니메이터를 기존의 버티컬 스테레오 헤드 마운트 카메라와 페어링하면 훨씬 뛰어난 퀄리티를 구현할 수 있습니다.

자세히 더 알아보겠습니다.

손쉽게 제작할 수 있는 고퀄리티 페이셜 애니메이션

기존에는 전문가로 구성된 팀이라도 배우의 연기에 담긴 모든 뉘앙스를 디지털 캐릭터에 충실히 재현하려면 수개월이 걸렸습니다. 이제 메타휴먼 애니메이터가 훨씬 적은 노력과 시간으로 이 어려운 작업을 대신 처리합니다.

이 새로운 기능은 4D 솔버를 사용해 비디오와 뎁스 데이터를 연기자의 메타휴먼 캐릭터와 결합합니다. 애니메이션은 GPU 하드웨어를 사용하여 로컬에서 제작되며, 단 몇 분 만에 최종 애니메이션이 완성됩니다.

이 모든 과정은 내부적으로 이루어지므로 카메라를 배우에게 맞추고 녹화 버튼을 누르기만 하면 됩니다. 캡처가 완료되면, 메타휴먼 애니메이터는 배우의 연기에 담긴 개성과 뉘앙스를 모든 메타휴먼 캐릭터에 정확하게 재현합니다.

또한 애니메이션 데이터는 적절한 릭 컨트롤을 사용하여 정확하고 시간적으로 일관되며, 컨트롤 전환이 부드럽기 때문에 애니메이션을 조정하려는 경우, 예술적으로 손쉽게 조정할 수 있습니다.

고사양 장비를 사용할 때 메타휴먼 애니메이터로 어떤 작업이 가능한지 궁금하신가요?

에픽게임즈의 제품군 중 하나인 3래터럴 팀이 유명 배우 라디보예 부크빅(Radivoje Bukvić)를 비롯한 세르비아 현지 아티스트들과 협업하여 제작한 단편 영화인 Blue Dot을 소개합니다. 이 단편 영화에서 라디보예 부크빅은 미카 앤틱(Mika Antic)의 시를 바탕으로 한 독백을 선보이고, 이 연기는 테이크원(Take One) 스튜디오의 모캡 스테이지에서 촬영되었으며, 이반 시작(Ivan Šijak)이 촬영 감독을 맡았습니다.

이러한 미묘한 결과물은 아티스트와 영화 제작자가 스테레오 헤드 마운트 카메라 시스템과 전통적인 영화 제작 기법과 함께 메타휴먼 애니메이터를 사용했을 때 기대할 수 있는 퀄리티를 보여줍니다.

또한 팀은 최고의 메타휴먼 애니메이터 결과물에 최소한으로 개입하며 인상적인 수준의 애니메이션 퀄리티를 얻을 수 있었습니다.

모든 메타휴먼을 위한 페이셜 애니메이션

메타휴먼 애니메이터로 캡처한 페이셜 애니메이션은 단 몇 번의 클릭만으로 모든 메타휴먼 캐릭터 또는 새로운 메타휴먼 페이셜 디스크립션 표준을 채택한 모든 캐릭터에 적용할 수 있습니다.

즉, 원하는 방식으로 캐릭터를 디자인할 수 있다는 의미입니다. 적용된 페이셜 애니메이션이 작동할 것이므로 안심하고 사용할 수 있습니다.

기술적인 측면을 잠시 살펴보면, 메시 투 메타 휴먼은 이제 단 3 프레임의 비디오와 iPhone으로 캡처하거나 버티컬 스테레오 헤드 마운트 카메라에서 얻은 데이터를 사용하여 재구성한 뎁스 데이터로 메타휴먼 아이덴티티를 생성할 수 있습니다.

이를 통해 솔버를 배우에 맞게 개인화하여 메타휴먼 애니메이터가 모든 메타휴먼 캐릭터에서 작동하는 애니메이션을 제작할 수 있게 됩니다. 심지어 오디오를 사용하여 사실적인 혀 애니메이션을 제작할 수도 있습니다.

iPhone으로 캡처하기

에픽은 고사양 캡처 시스템을 갖춘 전문가만이 할 수 있는 페이셜 퍼포먼스 캡처를 모든 크리에이터가 사용할 수 있도록 하고자 합니다.

메타휴먼 애니메이터는 iPhone(12 이상)과 데스크톱 PC만 있으면 가장 간단하게 사용할 수 있습니다. 이는 Live Link Face iOS 앱을 업데이트하여 원본 비디오와 뎁스 데이터를 캡처한 다음, 처리를 위해 디바이스에서 언리얼 엔진으로 직접 수집하도록 했기 때문에 가능합니다.

또한 메타휴먼 애니메이터와 함께 기존의 버티컬 스테레오 헤드 장착 카메라 시스템을 사용하여 훨씬 높은 퀄리티를 구현할 수 있습니다.

iPhone을 사용하든 스테레오 HMC를 사용하든, 메타휴먼 애니메이터는 캡처 워크플로의 속도와 사용 편의성을 향상시킵니다. 따라서 촬영 요건과 원하는 퀄리티에 가장 적합한 하드웨어를 유연하게 선택할 수 있습니다.

캡처한 애니메이션 데이터는 타임코드를 지원하므로 페이셜 연기 애니메이션을 바디 모션 캡처 및 오디오와 손쉽게 연동하여 완벽한 캐릭터 퍼포먼스를 구현할 수 있습니다.

촬영장에서 창의적 선택을 위한 완벽한 솔루션

메타휴먼 애니메이터는 모든 메타휴먼 캐릭터에 페이셜 애니메이션을 빠르게 처리하고 적용할 수 있기 때문에 촬영 중에 창의적인 반복작업을 하는 데 안성맞춤입니다.

배우의 더 나은 연기를 이끌어 내거나, 다른 감정에 몰입하게 하거나, 단순히 새로운 방향을 모색하고 싶다면 다시 촬영하기만 하면 됩니다. 커피 한 잔 마시는 데 걸리는 시간이면 결과물을 검토할 수 있습니다.

촬영하는 동안 언리얼 엔진에서 애니메이션 데이터를 바로 검토할 수 있으므로, 최종 캐릭터가 애니메이팅되기 전에 캡처의 퀄리티를 미리 평가할 수 있습니다.

또한, 배우가 스테이지에 있는 동안 재촬영을 할 수 있으므로 나중에 모든 관계자를 다시 모으기 위해 시간과 비용을 들일 필요 없이 그 자리에서 최고의 장면을 얻을 수 있습니다.

커스텀 캐릭터를 위한 새로운 메시 투 메타휴먼 워크플로

이번 출시 버전에서는 메타휴먼 애니메이터뿐만 아니라 메시 투 메타휴먼도 확장하여 템플릿 메시 포인트 위치를 직접 설정할 수 있도록 했습니다.

메시 투 메타휴먼은 형태를 맞추는 작업을 수행할 때 어떠한 토폴로지라도 사용 가능하지만, 이 경우에 입력한 메시의 볼륨과 근사한 형태를 얻을 수밖에 없었습니다. 이번 버전에서는 템플릿 메시를 설정할 수 있고 이때 메타휴먼 토폴로지를 엄격히 준수하면 근사한 형태가 아닌 정확한 형태의 리깅된 메시를 얻을 수 있습니다.

메시와 조인트에 대한 뉴트럴 포즈를 설정하는 DNA 캘리브레이션 기능과 함께 사용하면 커스텀 캐릭터에서 신속하게 집중할 수 있습니다.

더 자세히 알아보고 싶으신가요? 이제 새로운 메타휴먼 허브에서 메시 투 메타휴먼을 비롯한 메타휴먼 프레임워크의 모든 측면을 다룬 문서를 살펴볼 수 있습니다. 메타휴먼 허브는 에픽 툴에 대해 학습하고 다른 사람들과 정보를 교환할 수 있는 에픽 디벨로퍼 커뮤니티에 있습니다. 커뮤니티에는 작품을 선보이거나 질문을 할 수 있는 포럼 섹션, 에픽 및 사용자가 만든 튜토리얼 콘텐츠로 구성된 튜토리얼 섹션도 마련되어 있습니다.

지금 바로 시작하기

메타휴먼 애니메이터는 메타휴먼을 위한 쉽고 빠르며 비용 효율적인 페이셜 캡처와 애니메이션을 제공하며, 고급 사용자가 메타휴먼 메시를 수동으로 조정하여 캐릭터의 퀄리티를 유지할 수 있게 해주는 새로운 방법입니다. 지금 바로 시작하세요.

지금 메타휴먼 애니메이터를 시작하세요

메타휴먼 애니메이터는 여러분의 디지털 휴먼에게 미소를 선사할 준비가 되었습니다. 메타휴먼 플러그인의 최신 버전을 다운로드하고 언리얼 엔진 5.2로 업그레이드하여 지금 시작하세요!

지금 다운로드 문서 확인하기