Искусственный интеллект проникает во все аспекты нашей жизни: создает тексты, общается в чатах, рисует картины, управляет автономными транспортными средствами, сочиняет музыку и служит голосовыми помощниками. Неудивительно, что нейросети также используют в кино. Как новые технологии меняют киноиндустрию? Рассматриваем этот вопрос совместно с Стасом Журавлёвым, руководителем технологического отдела онлайн‑кинотеатра KION.
Сценаристы не нужны?
Пока в Голливуде идут забастовки сценаристов, разработчики ИИ активно ищут способы внедрить нейронные сети в процесс написания сценариев.
Честно говоря, первые попытки использовать нейросети для написания сценариев появились задолго до недавних событий, а уже в 2016 году был снят короткометражный фильм Sunspring с участием актёра из «Кремниевой долины» Томаса Миддлдитча. Короткометражка была создана для фестиваля Sci‑Fi London в рамках челленджа, где нужно было за 48 часов произвести небольшой научно‑фантастический фильм. Где появляется научная фантастика, там и ИИ: для написания сценария использовали нейросеть Benjamin.
Benjamin не остановился на Sunspring. Позднее он принимал участие в создании ещё двух короткометражек: It’s No Game с участием Дэвида Хассельхоффа и Zone Out совместно с тем же Томасом Миддлдитчем. Просматривая их сценарии, видно, что ИИ пока не достиг уровня великих драматургов, однако зрители часто отмечают рост качества работ Benjamin и большую восхищённость актёрским играми, придающими яркость written‑by‑AI тексту.
Бухгалтерия кинопроцесса
Хотя можно сколько угодно говорить о творчестве, в современной киноиндустрии решающую роль отыгрывают бюджеты и кассовые доходы. Без масштабных финансовых результатов продюсерам не нужны оригинальные идеи. Поэтому нейросети тоже находят применение. В 2020 году стало известно, что Warner Bros. в экспериментальном режиме начала применять ИИ для прогнозирования потенциального успеха своих картин. С её помощью компания планировала определять, в какие проекты инвестировать в первую очередь.
В арсенале киногорода появилась система управления, построенная на ИИ, разработанная компанией Cinelytic, способная прогнозировать будущие кассовые сборы, используя данные об актёрском составе, популярности аудитории, рисках и прочих параметрах. Этот инструмент помогает понять, как отдельные изменения, например замена актёра или сокращение длительности, влияют на интерес зрителей к фильму.
Representatives of the studio заявиют, что понимают текущие ограничения нейросетей и планируют использовать ИИ в первую очередь для сбора данных, расчётов и первичного анализа, а не творческих решений.
Визуальные эффекты
ИИ также применяется в создании визуального оформления. Например, при создании образа Таноса в фильме «Мстители: Война бесконечности» использовались методы машинного обучения.
Специалисты, работающие над спецэффектами, применяли как статичное сканирование, так и сканирование движения, используя технологию, разработанную в исследовательском центре Disney в Цюрихе.
«Мы взяли данные с камеры-шлема, которые имеют довольно низкое разрешение, чтобы создать сетку движения лица. Затем вы скармливаете эти данные алгоритму машинного обучения, который находит подходящее соответствие форме с высоким разрешением. С каждой итерации вы обучаете его — передаете ему информацию или вносите коррективы в форму, чтобы решение было более правильным. Со временем этот алгоритм улучшает конечные результаты, он обучается. Нам удалось сохранить так много невероятно тонких деталей мимики — небольшие подергивания лицевых мышц. Тонкие вещи, которые на самом деле не очевидны, но имеют решающее значение для драматического эффекта», — рассказала в одном интервью Келли Порт, супервайзер по визуальным эффектам в компании Digital Domain. Именно её команда работала над спецэффектами в кинокомиксе «Мстители: Война бесконечности».
В российском кино нейросети также применяются. Технология дипфейка позволила визуально омолодить Павла Майкова в сериале «Контакт». Алгоритм был обучен на архивных роликах с его участием, включая знаменитый сериал «Бригада».
