

Хорошая анимация завораживает и вдохновляет. Часы работы, пристальное внимание к деталям и вот, когда-то статичные двумерные персонажи вдруг оживают, обретают выразительные характеры и отправляются рассказывать свои истории. Magic!
На деле, искусство имитации жизни — кропотливое, очень тонкое занятие, не всегда творческое, но в результате всегда волшебное. И вдруг появляется Он — Искусственный интеллект.

Одним из кейсов, привлекших всеобщее внимание стал проект от команды Corridor на Youtube: ANIME ROCK, PAPER, SCISSORS — занятное семиминутное аниме сгенерированное нейросетью.

А что на деле? На деле можно говорить о схожести техники создания этого ролика с давно известной техникой ротоскопинга, так активно использующейся в анимации по сей день. Только в случае с ANIME ROCK, PAPER, SCISSORS ротоскопинг выходит на новый технологический уровень: команда режиссирует и снимает live-action версию будущего ролика, пропускает через «фильтр нейросети», а она в свою очередь старательно (или не очень) ротоскопирует видео, накидывает стиль рисованной аниме-истории и выдает результат.
Если смотреть на примеры вручную отротоскопированных произведений, будь то мультфильм «Огонь и лед» 1983 года или фильм «Помутнение» (2006), то и там, и тут мы наблюдаем все тот же метод: обрисовку изображений по уже отснятым роликам, только это делает не человек, а нейросеть.
В этом случае мы получаем невероятную экономию человеческих энергочасов, новый метод работы, и новый подход к обработке видео-референсов.
Написанный масляными красками «С любовью Винсент» так же снимался сначала на реальных актерах, а затем отрисовывался кадр за кадром. Потребовалось воссоздать 65000 кадров.
Так что насчет искусственного интеллекта?
Джеффри Катценберг, кинопродюссер и генеральный директор Dreamworks, в одном из интервью предполагает, что вскоре 90% художников лишаться работы из-за искусственного интеллекта.
Но на самом деле, анимация не первый раз сталкивается с кризисом. В 1990-х годах появляется компьютерная анимация, и кажется, что классика уходит в прошлое.
В 2004 год выходит мультфильм «Полярный экспресс», снятый с применением технологии захвата движения.
А сегодня все более популярными в области анимации становятся технологии на базе искусственного интеллекта.
Цели и главные вопросы исследования
В этом визуальном исследовании мне интересно обратиться к инструментам на базе искусственного интеллекта, познакомиться с сегодняшними технологиями во всем их разнообразии, и рассмотреть их функционал с точки зрения применимости на реальных проектах.
Каким конкретно образом искусственный интеллект (ИИ) прямо сейчас может помочь в работе аниматора? Выдают ли ИИ инструменты необходимое для продакшена качество? Оптимально ли обращаться к искусственному интеллекту и тратить время на доведение результата до необходимого уровня, или будет быстрее сделать все самому? ИИ в анимации это одно только веселье и гипотетическое будущее или реальный и вполне удобный вспомогательный инструмент?
И неужели художник-мультипликатор все-таки исчезнет?
Структура и предварительный вывод
Помимо концепции, я выделяю две основные главы:
Глава 1. Технологии — это большое исследование -обзор актуальных технологий на базе искусственного интелекта, начиная от первой в истории системы для генерации анимации и заканчивая концептуальными инструментами находящимися в разработке. В этой главе, я рассматриваю область применения ИИ в анимации персонажей во всем разнообразии.
Глава 2. Эксперимент — в этой главе я провожу собственный эксперимент, и пробую создавать анимацию с применением искусственного интеллекта для ВКР. Я обращаюсь к некоторым инструментам рассмотренным в первой главе и оцениваю релевантность полученного результата для реального проекта.
Искусственный интеллект обучается на основе созданного человеком контента, и его задача — не заместить человека полностью, а помочь в решении рутинных задач. Кроме того супервизия искусственного интеллекта всегда будет оставаться актуальной.