仮想体験でオーディエンスを魅了し、説得力のある作品を作ることがこの分野のクリエイターにとって究極の喜びです。こうした作品の最近の例としては、感動的なストーリーテリング、動的環境、そしてストーリー、映像、テレビの中のキャラクターと感情的につながるために限りなくリアルで信憑性があるキャラクターによって作り出されるものがあります。
ですから、テレビ放送、バーチャル プロダクション、アートなどのメディア業界のプロジェクトでは、リアルで信憑性のあるキャラクターを制作することを目指します。その多くは、UE4 で VR とバーチャル プロダクション技術の LiveAction を使用し、様々な最先端のバーチャル ライブ ショーを制作してきました。
LiveAction とは何か？
IKinema の技術の中心はパワフルなフルボディ IK ソルバーです。これは、アニメートされた 3D キャラクターで自然でリアルな動きを実現します。LiveAction ソフトウェアを使用すると、演者のパフォーマンスがモーションキャプチャカメラを使ってライブ キャプチャされます。このデータはただちに LiveAction を通してアンリアル エンジンにストリーミングされ、ACP フィルタを使ってデータが自動クリーニングされて仮想キャラクターに正確にリターゲットされます (レイテンシーはゼロ)。最終的に、演者からキャラクターに連続して途切れることのない自然な動きが出力されます。効率的なリアルタイム パイプラインによってアニメーション チームは膨大な時間を節約し、精神的ストレスを減らすことができました。
アンリアル エンジンと共に LiveAction を利用することで、世界でも類を見ないインタラクティブ性が高いリアルな仮想体験を生みだしました。
Hasbro, Facebook Live Broadcast:『Monopoly Ultimate Banking』 ゲームのローンチ発表では、LiveAction はスタジオ内で演者の動きをキャプチャし、そのモーキャップ データをカートゥーン ステージ内で動く 3D アニメーション化された Mr. Monopoly に直接リターゲットしました。LiveAction をアンリアル エンジンや他の技術と並行して実行することで、Mr. Monopoly を生き生きとしたものにしました。パフォーマンスを説得力のあるものにするためリアルな動きを取り入れ、Q&A のライブ セッション中に強力なパイプラインでチームを支えました。
Globo TV, 2016 Rio Olympics: Globo TV チームはLiveAction と UE4 を使用することで信頼性の高いリアルタイム パイプラインを実現しました。アスリートからキャプチャしたデータをストリーミングし、アニメートしたアバターにリターゲットした放送をリオ オリンピック開催中にブラジル全土で生放送しました。現実のプレゼンターは、対戦のリプレイを分析し、仮想アスリートとインタラクションしたり、仮想スタジアム環境を歩き回りました。
Ninja Theory, Hellblade:Senua’s Sacrifice:LiveAction はシームレスに演者の動作 (舞台上) を正確に伝え、最先端の史上初の VFX 技術を使ってバーチャルな Senua キャラクター (画面上) にリアルなヒューマノイドの動きを与えました。このショーはライブ オーディエンスの目の前でBest Real-Time Graphics & Interactivity Award at SIGGRAPH 2016 受賞 時に披露されました。
The New York Metropolitan Museum, The Return: アダム像をデジタル形式で再現 したインタラクティブなアート展示です。Tullio Lombardo 作の味わい深い彫刻が、デジタル パペット システム、モーション キャプチャ、ライブ アクションで甦りました。来館者が画面上のデジタルのアダムに質問し、演者がステージ上の別の場所で演じたり、質問に回答したりします。
技術内容
LiveAction の主な機能
- ライブ モーション キャプチャでは、複数キャラクター (例、中程度の仕様の CPU で最高 12 まで、さらにパワフルなプロセッサーでは 13 以上) をストリーミングし、レイテンシー ゼロでソルブ
- OptiTrack、 Vicon、 Xsens といったモーション キャプチャ システムに対応
- ジョイントのリターゲットや剛体のソルブをサポート (Facility 版と Studio 版のみ)
- Animation Cleaning Pipeline (ACP) – モーキャップ データのリアルタイム自動補正機能 (例、ノイズ、ジッター、足のスライディング、フロアの貫通など)
- アンリアルでフル パイプラインを設定するための専用 UI
- 類似キャラクターまたは異なる比率のキャラクターでソルブ
LiveAction 3.0 の新機能
- 自動ボーン マッピング
- テンプレート エディタ – カスタム名のマッチング
- ターゲット リグ上でスケルトンのマッチング
- ACP のワークフローの改善
- モーキャップ ストリーミング プロトコル (VRPN ベース) を通してカスタム モーキャップシステムをサポート
- 高速セットアップ、数分以内に結果を表示
皆さんの次のプロジェクトの概要は以下のようになるかもしれません。
プロジェクト: 仮想体験
納期: 昨日
概要: あっと驚かせるキャラクター モーション。予算内、予定どおり。 ストレス レベルは最小限。
メモ:アンリアル エンジンをダウンロードし、サポートを受けられるように Support@IKinema に連絡。
IKinema LiveAction 3.0 は Windows プラットフォームで利用可能。ノード ロック ライセンスとフローティング ライセンスがあります。Binary、Facility、Source の 3 レベルのライセンスがあります。詳細は IKinema をご覧ください。