Исследователи из компании Netflix утверждают, что, возможно, они сделали вездесущий зеленый экран устаревшим. Пурпурный зеленый экран (MGS), который называют инновационным достижением в области применения искусственного интеллекта в кино- и телеиндустрии, использует возможности искусственного интеллекта для улучшения визуальных эффектов, делая их более реалистичными и точными в режиме реального времени.
Новая технология гиганта потокового вещания является впечатляющим дополнением к его разнообразному арсеналу, в котором уже используется глубокое обучение для адаптации пользовательского опыта. Используя искусственный интеллект, Netflix добилась успеха в составлении профиля пользователей и предложении контента зрителям. ИИ также помог Netflix создать захватывающие фрагменты, повторы и трейлеры для увеличения зрительской аудитории.
Технология «зеленого экрана» — это широко используемый процесс, при котором актеры снимаются на ярко-зеленом фоне, который впоследствии может быть удален и заменен цифровым способом. Этот процесс может быть автоматизирован, но при появлении зеленых элементов на переднем плане или при работе с мелкими деталями, такими как пряди волос или прозрачные объекты, возникают проблемы. Для решения этих проблем операторы часто вручную корректируют настройки или закрашивают каждый кадр, что отнимает много времени.
Netflix утверждает, что MGS использует искусственный интеллект для достижения лучших результатов по сравнению с традиционными зелеными экранами за долю времени, которое обычно требуется для редактирования сцены.
Как Netflix использует искусственный интеллект для улучшения своей VFX-игры
Метод MGS предполагает съемку актеров на фоне ярких зеленых светодиодов, при этом спереди их освещают красные и синие светодиоды, что приводит к появлению пурпурного свечения. Такая уникальная конфигурация освещения создает отдельные красный, зеленый и синий каналы. Зеленый канал записывает только фон, в результате чего передний план кажется черным, а красный и синий каналы захватывают только передний план, делая фон черным.
Внедрение искусственного интеллекта в эту систему позволяет заменять зеленый канал в режиме реального времени, что означает, что актеры могут быть реалистично и мгновенно помещены на передний план другой сцены. Что еще более примечательно, технология искусственного интеллекта позволяет точно работать с прозрачными объектами и сложными деталями, такими как отдельные пряди волос, что было затруднительно при использовании традиционных методов.
Применение ИИ не ограничивается только съемочным этапом. Поскольку в результате применения технологии MGS актеры и объекты могут получить пурпурный оттенок, Netflix также использует искусственный интеллект для восстановления полного спектра цветов на переднем плане. Для этого используется эталонная фотография, на которой актеры освещены нормально.
Netflix — это лишь одна из многих компаний, оседлавших волну ИИ. Другие стартапы и «единороги» используют технологии искусственного интеллекта для более точного профилирования пользователей, обеспечения лучшего клиентского опыта и оптимизации своих продуктов.
Как недавно сообщал TCN, компания Zoom разработала конспект совещания на основе GPT. Кроме того, компания Meta использует генеративный ИИ для создания более качественной рекламы, Google совершенствует свой офисный пакет благодаря собственному LLM, и даже Министерство обороны США пытается придумать интересные варианты использования ИИ в качестве стратегического инструмента.
Несмотря на сложности, связанные с методикой MGS, Netflix верит в потенциал своей системы ОО на базе ИИ. Однако другие представители отрасли высказывают свои сомнения.
Дрю Лахат из видеопроизводственной компании Geiger Post высказал опасения по поводу практичности этой технологии в условиях быстрой съемки и ее конкурентоспособности с другими новыми методами. «Она может хорошо работать в полностью контролируемом пространстве, — сказал он, — но ей придется конкурировать с другими новыми технологиями, такими как виртуальные съемочные площадки, и завоевывать продюсеров в реальных сценариях».
Тем не менее, как сказал New Scientist исследователь Netflix Пол Дебевек, «компьютеры уже предоставили такие мощные инструменты, которые упрощают многие вещи. [Это] еще одна вещь, которую мы можем упростить, чтобы талантливые художники, которые у нас есть, могли сосредоточиться на художественном творчестве, на том, чтобы вещи выглядели лучше».
Netflix делает ставку на искусственный интеллект не только для улучшения зрительского восприятия, но и для оптимизации закулисной работы. Сценаристы, возможно, и не любят, когда искусственный интеллект проникает в их бизнес, но чувствуют ли себя так же художники VFX?
