Forscher von Netflix behaupten, dass sie den allgegenwärtigen Green Screen überflüssig gemacht haben könnten. Der Magenta Green Screen (MGS) wird als innovativer Fortschritt bei der Anwendung von KI in der Film- und Fernsehindustrie beschrieben. Er nutzt die Leistung künstlicher Intelligenz, um visuelle Effekte zu verbessern und sie in Echtzeit realistischer und präziser zu machen.
Die neue Technologie des Streaming-Giganten ist eine beeindruckende Ergänzung zu seinem vielfältigen Arsenal, das bereits Deep Learning einsetzt, um das Nutzererlebnis zu optimieren. Durch den Einsatz von KI hat sich Netflix einen Namen gemacht, indem es erfolgreich Profile seiner Nutzer erstellt und den Zuschauern Inhalte vorschlägt. KI hat Netflix auch dabei geholfen, fesselnde Highlights, Zusammenfassungen und Trailer zu erstellen, um die Zuschauerzahlen zu steigern.
Die Greenscreen-Technologie ist ein weit verbreitetes Verfahren, bei dem Schauspieler vor einem hellgrünen Hintergrund gefilmt werden, der später digital entfernt und ersetzt werden kann. Der Prozess kann automatisiert werden, aber es treten Probleme auf, wenn grüne Elemente im Vordergrund erscheinen oder wenn feine Details wie Haarsträhnen oder transparente Objekte beteiligt sind. Um diese Probleme zu beheben, müssen die Bediener häufig die Einstellungen manuell anpassen oder jedes Bild übermalen – ein zeitaufwändiger Prozess.
Netflix sagt, dass MGS mit Hilfe von KI bessere Ergebnisse als herkömmliche Greenscreens in einem Bruchteil der Zeit erzielt, die normalerweise für die Bearbeitung einer Szene benötigt wird.
Wie Netflix KI einsetzt, um sein VFX-Spiel zu verbessern
Bei der MGS-Methode werden die Schauspieler vor hellen grünen LEDs gefilmt und von vorne mit roten und blauen LEDs beleuchtet, wodurch ein magentafarbenes Glühen entsteht. Diese einzigartige Beleuchtungskonfiguration erzeugt separate rote, grüne und blaue Kanäle. Der grüne Kanal nimmt nur den Hintergrund auf, so dass der Vordergrund schwarz erscheint, während der rote und der blaue Kanal nur den Vordergrund erfassen, so dass der Hintergrund schwarz erscheint.
Durch die Einführung von KI in dieses System kann der grüne Kanal in Echtzeit ersetzt werden, was bedeutet, dass Schauspieler realistisch und sofort in den Vordergrund einer anderen Szene gestellt werden können. Noch bemerkenswerter ist, dass diese KI-Technologie mit transparenten Objekten und komplizierten Details wie einzelnen Haarsträhnen genau arbeiten kann, was bei herkömmlichen Methoden eine Herausforderung war.
Die Anwendung von KI hört nicht bei den Dreharbeiten auf. Da die MGS-Technik zu magentafarbenen Schauspielern und Objekten führen kann, setzt Netflix die KI auch ein, um das gesamte Farbspektrum im Vordergrund wiederherzustellen. Dazu wird ein Referenzfoto der normal beleuchteten Schauspieler verwendet.
Netflix ist nur eines der vielen Unternehmen, die auf der KI-Welle reiten. Andere Startups und Einhörner nutzen die KI-Technologie, um Nutzerprofile zu erstellen, bessere Kundenerfahrungen zu bieten und ihre Produkte zu optimieren.
Wie TCN kürzlich berichtete, hat Zoom einen GPT-gestützten Meeting-Zusammenfassungsdienst entwickelt. Auch Meta nutzt generative KI, um bessere Anzeigen zu erstellen, Google verbessert seine Office-Suite dank seines eigenen LLM, und sogar das US-Verteidigungsministerium versucht, interessante Anwendungsfälle für KI als strategisches Instrument zu finden.
Trotz der mit der MGS-Technik verbundenen Komplexität glaubt Netflix an das Potenzial seines KI-gestützten GS-Systems. Andere in der Branche haben jedoch Vorbehalte.
Drew Lahat von der Videoproduktionsfirma Geiger Post äußerte Bedenken hinsichtlich der praktischen Anwendbarkeit der Technik in schnelllebigen Drehumgebungen und ihrer Wettbewerbsfähigkeit mit anderen aufkommenden Methoden. „In einem vollständig kontrollierten Raum mag es gut funktionieren“, sagte er, „aber es müsste mit anderen neuen Techniken wie virtuellen Produktionsbühnen konkurrieren und die Produzenten in realen Szenarien überzeugen.“
Dennoch, so der Netflix-Forscher Paul Debevec gegenüber New Scientist, „haben Computer bereits so mächtige Werkzeuge zur Verfügung gestellt, die vieles einfacher machen. [Das ist eine weitere Sache, die wir vereinfachen können, so dass sich unsere talentierten Künstler auf die künstlerische Arbeit konzentrieren können, damit die Dinge besser aussehen.“
Netflix setzt auf künstliche Intelligenz, um nicht nur das Zuschauererlebnis zu verbessern, sondern auch um die Arbeit hinter den Kulissen zu optimieren. Schriftsteller mögen es hassen, wenn sich KI in ihr Geschäft einschleicht, aber sehen VFX-Künstler das auch so?
