コーチェラのステージに立つ Anyma。
Courtesy of Anyma

Unreal Engine で Anyma のコーチェラでのパフォーマンスを配信 AR に拡張

シネマティック メロディック テクノと没入感あふれるオーディオ ビジュアル体験のパイオニアである Anyma は、壮大な演出で定評があります。今年のコーチェラでは、エレクトロニック ミュージックと多分野のアーティストである Matteo Milleri が、2026 年のオーディオビジュアル ショー「ÆDEN」で世界デビューを果たし、自分自身の限界を超えたと言えるでしょう。

Anyma の視覚的に壮大な舞台セットはファンを圧倒しました。アーティストが巨大な柱の間で約 15 メートルもの高さまで吊り上げられ、メインステージのスクリーン全体には、ディストピアやギリシャ悲劇にインスパイアされた、そびえ立つようなデジタル彫刻が映し出されました。

これだけでも十分印象的ですが、自宅で YouTube のライブ配信を視聴していたファンは、どれほどの衝撃を受けたことでしょう。

観客は、世界的スーパースターの LISA が新曲 Bad Angel を初披露した際に、巨大なデジタル ヒューマンが会場を覆いつくすなど、さまざまな AR (拡張現実) グラフィックを堪能しました。

Unreal Engine を基盤としたこういった映像は、Anyma の世界観を実際のスクリーンの枠を超えてライブ配信そのものへと広げ、ステージ上で起きていることと、配信視聴者のためにリアルタイムで作り出されていたものとの境界線を曖昧にしました。

「ÆDEN では、古代神話とデジタルが共存する世界を創ろうという構想が常にありました」と Milleri 氏は言います。「ショーの冒頭では、神殿が立ち上がり倒壊する様子を AR で拡張する演出を取り入れ、映画のような臨場感がありながらも、リアリティを感じさせる世界観を瞬時に作り上げました。LISA の登場は、Unreal Engine とのコラボレーションによって実現したもう 1 つの真のハイライトでした。実際のステージでの彼女の存在感と、ショーのビジュアルが自然に融合することで、デジタルと人間が同じ空間を共有するという相乗効果が完璧に表現されていました。ファンからいただいた反応は、単にショーを見ているのではなく、まるでその世界の中にいるように感じられたというもので、私が目指していたとおりのものでした」

進化し続けるコーチェラのキャンバス


Ryan Cenicola 氏は、コーチェラ イノベーション チームのリード イノベーション プロデューサーです。Cenicola 氏の業務は、会場、フィールドの観客、オンラインの視聴者など、あらゆる人々のために、コーチェラ体験を拡大することです。

Cenicola 氏は、次のように述べています。「コーチェラは、アーティストが最も野心的なビジョンを実現する場です。アーティストがより自由に表現できるキャンバスを提供するために、私たちは常に新しいテクノロジーを模索しています」 

イノベーション チームは、最先端のライブ配信ツールを求めて、以前から Unreal Engine テクノロジーを使用しているスタジオと提携してきました。その第一歩として、2022 年には Flume との 画期的な AR (拡張現実) ライブ配信体験を実現しました。

ワールド構築、そびえ立つ巨大なキャラクター、シネマティックなビジュアルで知られるアーティストの Anyma は、この進化の次のステップにまさにうってつけの存在でした。

Anyma のライブ ショーは、そのスケール感で際立っています。単にワイドスクリーンを動きで埋め尽くすのではなく、時折、映像が上昇し、観客を圧倒するような巨大なキャラクターが出現します。

このビジュアル表現により、このプロジェクトは、配信 AR を手掛けるリアルタイム ビジュアル制作会社 All Of It Now の CTO を務める、Berto Mora 氏にとって、特に魅力的なプロジェクトとなりました。

Mora 氏は、以前から Anyma のショーのファンでした。ステージ上のグラフィックのスケール、クオリティ、そしてたった 1 体のキャラクターが観客の視線を釘付けにする魅力に心酔していました。Mora 氏は、次のように述べています。「たった 1 体のキャラクターが観客を圧倒するところに魅力を感じました。というのも、そういうアーティストはあまり見たことがないからです。『私たちだったら、どこまでスケールアップできるんだろう?』と考えました」

今回のコーチェラのパフォーマンスでは、単にそのビジュアルを再現するだけでは不十分でした。Anyma のビジュアル ワールドとリアルタイム コンテンツをシームレスに融合させ、ライブ配信へと展開することが課題だったのです。

Unreal Engine がパイプラインの鍵を握り、その瞬間を実現しました。

Mora 氏は、Unreal Engine を、配信 AR に必要な多くの要素を統合するハブと表現しています。「最も難しいのは、実世界と仮想世界を融合させることです」と彼は言います。

それを実現するには、実空間と仮想空間の両方を把握し、両者を融合させる方法を理解する必要があります。つまり、実際のカメラを現場で動かしたときに、Unreal Engine 内のバーチャル カメラと完全に同期して動くようにする必要があるのです。

実際のカメラが 1 m 動けば、バーチャル カメラも同じように動かなければなりません。レンズが変わると、仮想世界もそれに合わせて正しく反応しなければならないのです。2 つの世界が一致しなければ、このイリュージョンは成立しません。

チームは、ショーの仮想キャラクターがまるで、ステージ、スクリーン、照明、そして観客と同じ空間にいるかのように、実際のフェスティバル環境に完全に溶け込んでいるように見せるためのツールを開発しました。この革新的な技術は、音楽コンサートではめったに見られないカメラ、スパイダーカムの活用によって実現しました。
Anyma のコーチェラのショーに登場した、MetaHuman で制作されたデジタル ヒューマンの Beatrix
Courtesy of Anyma

実世界と仮想世界の融合


スパイダーカムは多くの人が目にしたことがあるでしょう。スパイダーカムはスポーツでよく使われている、ケーブルで吊り下げられたカメラ システムで、安定化ビデオ カメラが 3D 空間を垂直と水平の両方向に移動しながら、フィールドを縦横無尽に駆け回る選手を追跡します。

Anyma のコーチェラでのパフォーマンスで、スパイダーカムの無限の可能性が切り開かれました。従来のような固定的なカメラ アングルに縛られることなく、配信では空間をダイナミックに移動し、仮想キャラクターの周りを旋回することさえも可能になりました。Mora 氏は続けます。「まるで自分が実際にその場にいるかのようにその空間を体験できるのです。まさに魔法のような体験です」

スパイダーカムがその真価を発揮したのは、LISA が新曲 Bad Angel を初披露したときでした。この場面では、Anyma が生み出した分身でありデジタル キャラクターでもある、人間と天使とアンドロイドのハイブリッド、Beatrix の巨大な AR ホログラムが、観客を見下ろすようにそびえ立ちました。

Beatrix が観客の上を浮遊している間、スパイダーカムは彼女の周りをスムーズに旋回し、ライブ配信の視聴者に、その光景を 360 度の映像で提供しました。

All Of It Now のリード テクニカル アーティストである Geoffrey Hepburn 氏は、次のように説明します。「これまでの AR 要素も印象的だったかもしれませんが、カメラの動きがないと、背景に置かれたオブジェクトのように感じてしまうことがありました。スパイダーカムを使用することで、ライブ配信の視聴者は、観客やステージとの対比で仮想キャラクターの巨大さを、実感できるようになったのです」

Hepburn 氏は続けます。「Beatrix の周りをぐるりと一周して見渡せることで、『すごい、Beatrix は観客を圧倒するほど巨大なんだ』と実感し、きわめて印象的な感覚を味わうことができます」

Unreal Engine サービス パートナーである All Of It Now はこれまで、ライブ ショー向けに動物、ロゴ、スタイライズされた 3D オブジェクトなどの要素を提供してきました。さらに没入感の高い方法でパフォーマンスに参加する巨大なデジタル ヒューマン キャラクターを扱うことは、All Of It Now にとってまったく新しい試みでした。

All Of It Now チームは MetaHuman を使用して Beatrix を制作しました。このフレームワークを活用して、Unreal Engine 内でリアルタイムに動作可能な、リギングされたリアルなキャラクター、Beatrix を作り上げたのです。

Mora 氏は説明します。「MetaHuman パイプラインを使えば、きわめてリアルなデジタル ヒューマンを作り出すことができます。リアルタイムで再生し、すべてのジョイント データやスケルタル データでキャラクターをリギングできることは、現在利用できるようになった最も素晴らしい機能の 1 つです」
Anyma のコーチェラのショーにおける AR 配信ビジュアルとしてのデジタル ヒューマンの Beatrix。
Courtesy of Anyma

プレッシャーのかかるライブショーでのリアルタイム イテレーション


コーチェラのようなフェスティバルでは、ライブ制作のスケジュールは、誰のためであっても、一切止まることはありません。ビジュアルに従来のオフライン レンダリングを使用している場合、柔軟性はほとんどありません。変更が反映されるまで何時間も待つ余裕はありません。 

ライティング、フレーミング、またはアニメーションの更新では、レンダリング、確認、修正、そして再レンダリングが必要になる場合があります。ライブ制作環境では、その遅延は大きな障害となります。Mora 氏は続けます。「Unreal Engine がアーティストを惹きつけるのは、多くのイテレーション作業を迅速に行える点です」

Unreal Engine のコンテンツはリアルタイムで実行されるため、アーティストとテクニカル チームはすぐに変更を確認できます。オフライン レンダリングを待つことなく、ライティングの調整、アセットの最適化、シーンのテスト、改善を行うことができます。

Hepburn 氏にとって、リアルタイム ワークフローは制作全体の一貫性を高める効果もあります。Hepburn 氏は次のように述べています。「リハーサル中は、ディレクターに iPad を渡します。そうすることで、彼らは自分の環境を歩き回りながら、デザインすることができます。この自由度によって、従来のアニメーション ツールでは実現できなかった方法で、成果物に命を吹き込むことができるのです」

1 人の CG エキスパートがフィードバックをメモして数時間かけて修正作業を行うのではなく、クリエイティブ チームがシーンを一緒に確認し、その場で変更を加えることができるようになりました。 

Hepburn 氏は続けます。「リアルタイムでディレクターと座って直接話し合ったり、Zoom 会議に参加したりして、『太陽を動かした方がいいですか?動かしますね』と調整したり、物をつかんで動かしたりすることができます。これを、撮影現場でも、制作の最後の瞬間まで行うことができます」

「後から修正する」のではなく、チームはショーが始まる前にあえてクリエイティブな課題を解決します。そうすることで、ライティング チームから環境チーム、ディレクターに至るまで、全員が同じ認識を共有できるのです。
Unreal Engine が Anyma のコーチェラのショーのビジュアルを実現。
Courtesy of Anyma

ライブ パフォーマンスからリアルタイムの世界へ 


配信 AR は音楽業界ではまだ未知の領域ですが、コーチェラと Anyma がその素晴らしい可能性を示しました。

スポーツ放送では、データ、グラフィック、分析を表示するために長年 AR が使用されてきました。音楽では、AR はそれとは異なる機会を提供します。アーティストの世界を広げ、ストーリーを深め、ライブ配信ならではのパフォーマンスを作り出す機会です。

自宅で視聴するオーディエンスにとって、それは単にカメラがステージを映しているだけではないことを意味します。その映像自体がクリエイティブな体験になります。

そして、Unreal Engine で作業するチームにとっては、ライブ パフォーマンスがリアルタイムの世界になることを意味します。つまり、応答性が高く、映画のような、実空間と仮想空間を行き来できる世界です。
コーチェラで、UE で制作した映像の前で、パフォーマンスを行う Anyma。
Courtesy of Anyma