Искусственный интеллект в кино и анимации. От спецэффектов до цифровых актеров
Индустрия кино – одна из тех сфер, которым необходимо постоянно развиваться для выживания. Люди тысячелетиями жаждут хлеба и зрелищ, и чтобы понравиться новому поколению зрителей, индустрии развлечений нужно меняться. Так в свое время случился переход от немого кино к озвученному. От черно-белой картинки к цветной. От дешевых спецэффектов к высокотехнологичной компьютерной графике, способной воплотить в реальность даже самые смелые идеи сценаристов. И следующим витком в развитии кинематографа станет массовое применение инструментов на базе искусственного интеллекта.
Как искусственный интеллект делает кино лучше и дешевле
Существуют как минимум три основных сферы применения ИИ в кинематографе, каждая из которых одинаково важна для бизнеса и позволяет значительно сократить расходы на итоговый продукт, при этом сохранив уровень качества. К ним относятся:
За примерами далеко ходить не надо. Относительно недавно на экраны вышла пятая часть приключений Индианы Джонса с бессменным исполнителем главной роли Харрисоном Фордом. Вот только киношникам нужно было что-то придумать с тем фактом, что голливудской звезде к моменту начала съемок уже пошел девятый десяток. Пожилого мужчину омолодили для большого количества эпизодов с помощью искусственного интеллекта, а в сценах экшена, которые старик вряд ли смог бы исполнить, прикрепили цифровую маску его лица на более молодого дублера-каскадера. Аналогичное омоложение также было использовано для нескольких фильмов киновселенной Марвел. И это только те случаи, которые даже не скрываются от широкой аудитории. А ведь о некоторых ИИ эффектах зрители даже не догадываются.
Еще одна сфера, которая только выигрывает от использования генеративных инструментов – это мультипликация. Студии вроде Pixar или Dreamworks прикладывают огромные усилия, создавая красочные истории, и бюджеты на производство там настолько огромны, что даже блокбастерам бывает сложно выйти на окупаемость. Нейросети же позволяют быстро добавлять изображению деталей, прорисовывать дополнительные кадры для повышения плавности анимации, автоматически проводить цветокоррекцию и улучшать другие параметры картинки. Еще пара лет развития, и вполне возможно, что мы увидим мультсериалы на эфирных каналах, которые по качеству будут находиться на уровне полнометражек и не будут сильно бить по карману студии.
- Генерация идей и написание сценариев. Еще в далеком 1895 году французский театровед Жорж Польти сказал, что все драматические произведения так или иначе сводятся к одной из 36-и драматических ситуаций. А сценарист должен сделать так, чтобы классический шаблон смотрелся свежо и интересно за счет его авторской подачи. Нейросеть способна добавить сценарию деталей или подсказать идеи по его наполнению, чем существенно облегчает работу;
- Анализ данных и финансовые вопросы. Так как кино и анимация – это высококонкурентная среда, студии могут потерять сотни миллионов долларов на своих неудачных проектах. К счастью для них, наметился явный прогресс в сфере ИИ, позволяющий отсекать потенциально провальные идеи еще на зачаточной стадии. Таким занимается, например, сервис ScriptBook. Он анализирует потенциал фильма, эмоциональный накал сценария и другие параметры, после чего предсказывает возможные сборы от проката;
- Продакшен и постпродакшен. Те сферы, которые интересны зрителю больше всего. ИИ помогает монтировать изображение, накладывать фильтры, существенно ускоряет процесс создания спецэффектов. Именно благодаря нему стал наблюдаться заметный прогресс в области корректировки внешности актеров, и в последние пару лет мы можем наблюдать уникальные случаи омоложения или даже “возвращения к жизни” людей, которые уже умерли на момент начала съемок.
За примерами далеко ходить не надо. Относительно недавно на экраны вышла пятая часть приключений Индианы Джонса с бессменным исполнителем главной роли Харрисоном Фордом. Вот только киношникам нужно было что-то придумать с тем фактом, что голливудской звезде к моменту начала съемок уже пошел девятый десяток. Пожилого мужчину омолодили для большого количества эпизодов с помощью искусственного интеллекта, а в сценах экшена, которые старик вряд ли смог бы исполнить, прикрепили цифровую маску его лица на более молодого дублера-каскадера. Аналогичное омоложение также было использовано для нескольких фильмов киновселенной Марвел. И это только те случаи, которые даже не скрываются от широкой аудитории. А ведь о некоторых ИИ эффектах зрители даже не догадываются.
Еще одна сфера, которая только выигрывает от использования генеративных инструментов – это мультипликация. Студии вроде Pixar или Dreamworks прикладывают огромные усилия, создавая красочные истории, и бюджеты на производство там настолько огромны, что даже блокбастерам бывает сложно выйти на окупаемость. Нейросети же позволяют быстро добавлять изображению деталей, прорисовывать дополнительные кадры для повышения плавности анимации, автоматически проводить цветокоррекцию и улучшать другие параметры картинки. Еще пара лет развития, и вполне возможно, что мы увидим мультсериалы на эфирных каналах, которые по качеству будут находиться на уровне полнометражек и не будут сильно бить по карману студии.
Насколько хорошо ИИ справляется с поставленными задачами?
Ответить на этот вопрос достаточно просто – нужно лишь посмотреть на то, как именно отреагировали представители киноиндустрии на внедрение искусственного интеллекта в область их компетенции. И реакция у большинства оказалась паническая. Большое количество людей, ознакомившись с возможностями нейросетей, стали всерьез переживать за свои рабочие места. В перечень находящихся в зоне риска специальностей попали художники и дизайнеры, видеомонтажеры, писатели и сценаристы, аналитики данных, маркетологи, композиторы и многие другие. Они понимают, что сейчас индустрия кино находится в кризисе, многие фильмы не окупаются, и студии сделают все возможное, чтобы снизить издержки производства.
За прошедшие месяцы профсоюзные организации Голливуда сумели добиться некоторых уступок, касающихся защиты интересов реальных людей в эпоху искусственного интеллекта. В частности, после масштабных летних забастовок, удалось воспрепятствовать несанкционированному использованию внешности и голосов актеров киностудиями. Теперь обучение ИИ или производство контента на основе узнаваемой личности должно происходить с ее согласия, и на четко прописанных в договоре условиях.
За прошедшие месяцы профсоюзные организации Голливуда сумели добиться некоторых уступок, касающихся защиты интересов реальных людей в эпоху искусственного интеллекта. В частности, после масштабных летних забастовок, удалось воспрепятствовать несанкционированному использованию внешности и голосов актеров киностудиями. Теперь обучение ИИ или производство контента на основе узнаваемой личности должно происходить с ее согласия, и на четко прописанных в договоре условиях.
Создавать кино и анимацию теперь может каждый
Самые мощные инструменты для применения в кино разрабатываются на деньги крупных студий и являются их внутренней кухней, недоступной для широкой аудитории. Однако обычные энтузиасты тоже могут заниматься творчеством с помощью искусственного интеллекта. Для этого достаточно подписаться на бота в мессенджере Telegram. Его функционал позволяет:
Чтобы превратить сгенерированные изображения в движущуюся картинку, придется использовать дополнительные инструменты – EbSynth и Stable Diffusion с дополнительными скриптами. Результаты их работы пока еще нельзя назвать реалистичными – картинка получается странная, можно даже сказать, психоделическая. Но если вы тяготеете к артхаусным проектам, это даже станет фишкой вашей анимации. Уже сейчас подобные проекты, где многое создается при помощи искусственного интеллекта, занимают призовые места на фестивалях любительских короткометражек. Так почему бы не попробовать?
- Придумывать сюжеты для фильмов и видеороликов;
- Генерировать изображения по заданным параметрам;
- Составлять сценарии с покадровой разметкой и советами по съемке (какой план/ракурс взять и т.д.);
- Отвечать на вопросы, касающиеся темы производства кино.
Чтобы превратить сгенерированные изображения в движущуюся картинку, придется использовать дополнительные инструменты – EbSynth и Stable Diffusion с дополнительными скриптами. Результаты их работы пока еще нельзя назвать реалистичными – картинка получается странная, можно даже сказать, психоделическая. Но если вы тяготеете к артхаусным проектам, это даже станет фишкой вашей анимации. Уже сейчас подобные проекты, где многое создается при помощи искусственного интеллекта, занимают призовые места на фестивалях любительских короткометражек. Так почему бы не попробовать?
