撮影現場でのバーチャルプロダクション

オンセット・バーチャル・プロダクション（OSVP）^{[ a ]}は、テレビや映画制作向けのエンターテイメント技術で、LEDパネルをセットの背景として使用し、その上にビデオやコンピュータ生成画像をリアルタイムで表示できるものです。OSVPの使用は、Epic Gamesが開発したUnreal Engineを使用した『マンダロリアン』のシーズン1 （2019年）で使用された後、広く普及しました。

オーストラリアの映画監督クレイトン・ジェイコブソンは、 2003年に洗剤のテレビCMを撮影した際に、当時使用されていたグリーンスクリーンを改良するというアイデアを初めて思いついた。息子がビデオゲームをプレイしているのを見て、ゲームで使用されている3D技術を目にしたことがきっかけだった。最終的に、2016年にジェイコブソンと息子は、LEDスクリーンを使って小屋で仮想制作ステージのプロトタイプの1つを作った。しかし、この技術をさらに発展させることに興味を持つ人がいなかったので、彼は諦めた。2017年、PRGの社長ブライアン・エドワーズは、撮影監督のマルクス・フェルデラー、プロデューサーのジュゼッペ・メルカダンテとジャン・ド・ムーロンと提携し、映画『Megan』（2018年）の撮影現場で、オンセット仮想制作LEDウォールパネル技術であるOverDriveを披露した。この技術は、事前に録画された背景プレートをLEDウォールに表示することで、グリーンスクリーン合成に取って代わった。これにより、俳優はシーンが行われている環境を見ることができ、没入感が向上し、ポストプロダクションで追加されるはずだった背景を想像する必要が減りました。LED パネルはインタラクティブな照明も提供し、俳優、衣装、小道具、物理的なセットに色、反射、雰囲気効果を直接投影しました。これにより、肌や反射面に緑色の光が漏れるなどの一般的なグリーンスクリーンの問題を防ぎ、撮影監督は撮影中に最終画像をより正確に確認することができました^{[ 1 ]}。しかし、他の映画制作者もこのアイデアに気付き、2018 年にオーストラリアの撮影監督であるグレイグ・フレイザーは、スター ウォーズフランチャイズのスピンオフシリーズであるマンダロリアン(2019 年公開)の撮影にこの技術を使用しました。撮影段階でグリーンスクリーンを使用する代わりに、チームはシリーズの制作段階とポストプロダクションを組み合わせました。彼らは、 Unreal Engineゲーム ソフトウェア ( Fortniteなどで使用されている)を実行する強力なコンピューターに接続された巨大な LED ウォールを設置しました。彼らはこのサウンドステージを「ボリューム」と呼んだが、これは視覚効果技術が行われるステージを指すのにすでに使われていた用語である。^{[ 2 ]}

ILMのStageCraftを使用した『マンダロリアン』での独創的な使用以来、この技術はますます人気が高まっている。Epic Gamesの映画・テレビ業界マネージャーであり、 Unreal Engineの開発者でもあるマイルズ・パーキンスは、2019年のわずか3つから2022年10月までに約300のステージが存在すると推定している。^{[ 3 ]}これらのほとんどは、ロックダウンにより制作スタジオが他の場所に移動せずに映画を制作する方法を見つけなければならなかったCOVID-19パンデミック中または後に構築された。 ^{[ 2 ]}

2023年3月、世界最大のバーチャル制作スタジオがオーストラリアのメルボルン市にあるドックランズ・スタジオ・メルボルンにオープンした。^{[ 2 ]}

オンセットバーチャルプロダクション（OSVP）は、バーチャルプロダクション（VP）、イマーシブバーチャルプロダクション（IVP）、インカメラビジュアルエフェクト（ICVFX）^{[ 4 ]} 、またはザ・ボリュームとしても知られています。

OSVP セットは、慎重な調整とキャリブレーションにより、実際のセットや屋外ロケーションの外観に非常に近いものにすることができます。^{[ 5 ]} OSVP は拡張現実の応用例と見なすことができます。OSVP は、セットを囲むグリーンスクリーンの背景幕と、カメラの下流で合成される仮想環境をグリーンスクリーンプレートに合成する仮想スタジオ技術とは対照的です。OSVP では、セットを囲む仮想世界がカメラ、俳優、クルーに見え、セット上のオブジェクトは LED スクリーンからの光で照らされ、リアルなインタラクティブ照明効果を生み出し、仮想の背景と前景は、レンズの歪み、被写界深度効果、ボケ、レンズフレアなどの自然で微妙な手がかりを含めて、カメラで直接キャプチャされます。これにより、ロケーション撮影により近い、はるかに自然な体験となり、仮想セットで達成できるよりも映画制作プロセスが速く、より直感的になります。

移動するカメラの視点から視差による奥行きの手がかりを正しくレンダリングするには、低遅延のリアルタイムモーションキャプチャ技術からのデータに基づいて背景画像のマッチムーブを使用する必要があります。この技術は、StypeやMosysなどのシステムを使用してカメラを追跡し、ボリューム内のカメラの位置を追跡して、Unrealシーン内でこの位置を一致させることで、シーン内での動きも反映されるようにします。

SMPTE、映画芸術科学アカデミー、アメリカ撮影監督協会などの業界団体は、OSVPの開発を支援するための取り組みを開始した。^{[ 5 ] [ 6 ] [ 7 ] [ 8 ]}

OSVP を使用するステージには、StageCraft のさまざまなステージ、CBSから長期リースを受けているPixomondoのトロントを拠点とする LED ステージ、ニューヨーク市の ZeroSpace の Volume ^{[ 9 ] 、Lux Machina のさまざまなステージ[ 3} ]などがあります。日本では、東映がスーパー戦隊番組「アバタロウ戦隊ドンブラザーズ」^{[ 10 ]}と「王様戦隊キングオージャー」でLED ウォールとバーチャル プロダクションを使用しました。後者はSony PCL Inc.と共同で制作されました^{[ 11 ] 。}トロントの Dark Slope Studios は、 Heated Rivalry、Gen V、Netflix の BET のバーチャル プロダクション ショットの本拠地です^{[ 12 ]} 。イタリアのローマにあるCinecittà Studios には、周囲 167 フィート、高さ 26 フィートの LED ウォールがあります。ローランド エメリッヒのテレビ シリーズ「Those About to Die」はこの場所で撮影されました。

• 映画のようなバーチャルリアリティ
• エンターテインメント技術
• 拡張現実
• ホロデッキ
• 仮想カメラシステム
• バーチャルシネマトグラフィー