Концепция
This project is a student project at the School of Design or a research project at the School of Design. This project is not commercial and serves educational purposes
big
Original size 1920x1080

Концепт-арт к Shadow Fight 4: Arena

Хорошая анимация завораживает и вдохновляет. Часы работы, пристальное внимание к деталям и вот, когда-то статичные двумерные персонажи вдруг оживают, обретают выразительные характеры и отправляются рассказывать свои истории. Magic!

На деле, искусство имитации жизни — кропотливое, очень тонкое занятие, не всегда творческое, но в результате всегда волшебное. И вдруг появляется Он — Искусственный интеллект.

big
Original size 854x480

Anime Rock, Paper, Scissors / 2023 / Corridor Crew

Одним из кейсов, привлекших всеобщее внимание стал проект от команды Corridor на Youtube: ANIME ROCK, PAPER, SCISSORS — занятное семиминутное аниме сгенерированное нейросетью.

big
Original size 1920x363

А что на деле? На деле можно говорить о схожести техники создания этого ролика с давно известной техникой ротоскопинга, так активно использующейся в анимации по сей день. Только в случае с ANIME ROCK, PAPER, SCISSORS ротоскопинг выходит на новый технологический уровень: команда режиссирует и снимает live-action версию будущего ролика, пропускает через «фильтр нейросети», а она в свою очередь старательно (или не очень) ротоскопирует видео, накидывает стиль рисованной аниме-истории и выдает результат.

Original size 854x480

Anime Rock, Paper, Scissors / 2023 / Corridor Crew // процесс создания ролика

Если смотреть на примеры вручную отротоскопированных произведений, будь то мультфильм «Огонь и лед» 1983 года или фильм «Помутнение» (2006), то и там, и тут мы наблюдаем все тот же метод: обрисовку изображений по уже отснятым роликам, только это делает не человек, а нейросеть.

В этом случае мы получаем невероятную экономию человеческих энергочасов, новый метод работы, и новый подход к обработке видео-референсов.

Original size 2480x674

Огонь и лед / 1983 / Процесс создания: съемка live-action и последующий ротоскопинг аниматорами

Original size 2480x674

Помутнение / 2006 / Ричард Линклейтер // Процесс создания фильма методом интерполяционного ротоскопирования (аниматор обрисовывает ключевые кадры, программа генерирует промежуточные)

Написанный масляными красками «С любовью Винсент» так же снимался сначала на реальных актерах, а затем отрисовывался кадр за кадром. Потребовалось воссоздать 65000 кадров.

Original size 1450x1080

Ван Гог. С любовью, Винсент /2017/ Дорота Кобела, Хью Уэлшман

Original size 2480x1350

Ван Гог. С любовью, Винсент /2017/ Дорота Кобела, Хью Уэлшман

Так что насчет искусственного интеллекта?

Джеффри Катценберг, кинопродюссер и генеральный директор Dreamworks, в одном из интервью предполагает, что вскоре 90% художников лишаться работы из-за искусственного интеллекта.

Но на самом деле, анимация не первый раз сталкивается с кризисом. В 1990-х годах появляется компьютерная анимация, и кажется, что классика уходит в прошлое.

В 2004 год выходит мультфильм «Полярный экспресс», снятый с применением технологии захвата движения.

А сегодня все более популярными в области анимации становятся технологии на базе искусственного интеллекта.

Original size 1920x1080

Шрек / 2001 / Эндрю Адамсон, Вики Дженсон

Цели и главные вопросы исследования

В этом визуальном исследовании мне интересно обратиться к инструментам на базе искусственного интеллекта, познакомиться с сегодняшними технологиями во всем их разнообразии, и рассмотреть их функционал с точки зрения применимости на реальных проектах.

Каким конкретно образом искусственный интеллект (ИИ) прямо сейчас может помочь в работе аниматора? Выдают ли ИИ инструменты необходимое для продакшена качество? Оптимально ли обращаться к искусственному интеллекту и тратить время на доведение результата до необходимого уровня, или будет быстрее сделать все самому? ИИ в анимации это одно только веселье и гипотетическое будущее или реальный и вполне удобный вспомогательный инструмент?

И неужели художник-мультипликатор все-таки исчезнет?

Структура и предварительный вывод

Помимо концепции, я выделяю две основные главы:

Глава 1. Технологии — это большое исследование -обзор актуальных технологий на базе искусственного интелекта, начиная от первой в истории системы для генерации анимации и заканчивая концептуальными инструментами находящимися в разработке. В этой главе, я рассматриваю область применения ИИ в анимации персонажей во всем разнообразии.

Глава 2. Эксперимент — в этой главе я провожу собственный эксперимент, и пробую создавать анимацию с применением искусственного интеллекта для ВКР. Я обращаюсь к некоторым инструментам рассмотренным в первой главе и оцениваю релевантность полученного результата для реального проекта.

Original size 1920x1080

Кадр из ролика «How AI is Changing the Future of Animation: Challenges and Opportunities"/ Harvey Newman на YouTube

Искусственный интеллект обучается на основе созданного человеком контента, и его задача — не заместить человека полностью, а помочь в решении рутинных задач. Кроме того супервизия искусственного интеллекта всегда будет оставаться актуальной.

Chapter:
1
2
3
4
We use cookies to improve the operation of the HSE website and to enhance its usability. More detailed information on the use of cookies can be fou...
Show more