Netflixの研究者は、ありふれたグリーンスクリーンを時代遅れにしたかもしれないと述べている。マゼンタ・グリーン・スクリーン（MGS）は、映画やテレビ業界におけるAIの応用における革新的な進歩として説明され、視覚効果を強化するために人工知能の力を活用し、リアルタイムでよりリアルで正確なものにする。
ストリーミング配信の巨人であるネットフリックスの新技術は、すでにユーザー体験を調整するためにディープラーニングを採用している同社の多様な武器に、印象的な追加となる。AIを活用することで、ネットフリックスはユーザーをプロファイリングし、視聴者にコンテンツを提案することに成功した。AIはまた、Netflixが視聴者数を増やすために、魅力的なハイライト、総集編、予告編を作成するのにも役立っている
。
グリーンスクリーン技術は、明るい緑色の背景をバックに俳優を撮影する、広く使われているプロセスである。このプロセスは自動化できるが、前景に緑色の要素が現れたり、髪の毛の束や透明な物体のような細かいディテールが絡んだりすると問題が生じる。このような問題に対処するため、オペレーターはしばしば手動で設定を調整したり、各フレームを塗り替えたりしているが、これは時間のかかる作業だ。
Netflixによると、MGSはAIを使用することで、従来のグリーンスクリーンよりも優れた結果を、通常シーンの編集にかかる時間の数分の一で達成することができる。
NetflixがAIを使ってVFXゲームを向上させる方法
MGS方式では、明るい緑色のLEDを背景に俳優を撮影し、赤色と青色のLEDで俳優を正面から照らすことで、マゼンタ色の輝きを生み出している。このユニークな照明構成により、赤、緑、青の別々のチャンネルが作られる。緑色のチャンネルは背景のみを記録し、前景を黒く見せ、赤と青のチャンネルは前景のみを捉え、背景を黒く見せる。
このシステムにAIを導入することで、緑チャンネルをリアルタイムで入れ替えることができるようになり、俳優を別のシーンの前景にリアルに瞬時に配置することができる。さらに驚くべきことに、このAI技術は、従来の方法では困難だった透明なオブジェクトや、髪の毛の一本一本のような複雑なディテールにも正確に対応することができる。
AIの応用は撮影段階にとどまらない。MGS技術では俳優や物体がマゼンタ色に染まることがあるため、NetflixはAIを使用して前景の全スペクトルの色を復元することも行っている。これは、通常通りに照明された俳優の参照写真を使用することで達成される
。
ネットフリックスは、AIの波に乗る数多くの企業のひとつに過ぎない。他の新興企業やユニコーン企業も、AI技術を活用することで、ユーザーをより良くプロファイリングし、より良い顧客体験を提供し、製品を最適化している。
TCNが最近報じたように、ZoomはGPTを利用した会議要約ツールを開発した。また、Metaはより良い広告を作成するためにジェネレーティブAIを使用しており、Googleは独自のLLMのおかげでオフィススイートを改善している。
MGS技術に関連する複雑さにもかかわらず、ネットフリックスはAIを搭載したGSシステムの可能性を信じている。しかし、業界の他の人たちは懸念を抱いている。
映像制作会社Geiger PostのDrew Lahat氏は、ペースの速い撮影環境におけるこの手法の実用性や、他の新しい手法との競争力について懸念を示した。”完全にコントロールされた空間ではうまくいくかもしれないが、バーチャルな制作ステージのような他の新しい技術と競合し、現実のシナリオでプロデューサーを勝たせなければならないだろう “と彼は言った。
とはいえ、ネットフリックスの研究者ポール・デベベックが『ニュー・サイエンティスト』誌に語ったように、「コンピューターはすでに、多くのことを簡単にする強力なツールを提供しています。[これは）我々がより簡単にできるもうひとつのことであり、我々が抱える才能あるアーティストが芸術性に集中し、実際にものをより良く見せることができるようにするためのものです」。
ネットフリックスは、視聴者の体験を向上させるだけでなく、舞台裏の合理化にもAIに賭けている。作家はAIが自分たちのビジネスに忍び込むのを嫌うかもしれないが、VFXアーティストも同じように感じているのだろうか？
