Уже сейчас искусственный интеллект задействован в огромном количестве систем, решении разнообразных задач и даже реальных проектах. Но многие технологии все еще скорее экспериментальны.
Получится ли использовать технологии на базе ИИ в работе над анимацией для реального проекта, дипломного короткометражного ролика «Ордалион»?
Ордалион / 2023 / превиз
Синопсис: Бывалый охотник за жемчужинами по воле судьбы оказывается пленником мистической Рыбы-корабля, когда-то модифицированной людьми под военную машину. Герой исследует существо в попытках отыскать выход, а озлобленная на человечество рыба ему препятствует.
Ордалион / 2023 / превиз
Эксперимент я буду ставить на примере двух сцен из превиза:
1. Персонаж в ужасе убегает, падает, продолжает бег. 2. Персонаж вбегает в помещение, резко заскользив и меняя направление движения.
2.1 Генерация анимации для проекта через текстовые запросы
Попробуем заполучить анимацию для первой сцены. Необходимые элементы успеха: бег, падение, продолжение движения.
(К получившемуся результату я прикрепляю точный запрос, отправленный боту).
/a frightened character runs forward in a panic, suddenly he stumbles, looks back, gets up and runs further in a panic
/character runs fast and falls down
/сharacter runs fast in fear and panic. He accidentally falls down but gets up and runs fast again
/character runs super fast and falls down
/character runs fast and falls down
Генерация по текстовому запросу через сайт Replicate
Генерация по запросу: run fast, fall / Vmotionize
/character falls on his knees
Смогут ли они подружится? / Главный герой мультфильма «Ордалион»
Одна их сгенерированных анимаций, перенесенная на персонажа мультфильма
2.2 Генерация анимации для проекта с помощью ИИ мокапов
Референсы к анимации для «Человека Паука: через вселенные» / Emma (Pei-Hsuan) Shih
Для работы с этим инструментом потребуются видео-референсы. Многие редакторы на базе технологии предоставляют возможность покадрового редактирования, получившихся поз.
Запишем примерное движение для первой и второй сцены
Покадровое редактирование получившихся поз с помощью функционала сайта
Анимация от DeepMotion
Вариант от Radical
Генерация от Plask
Наблюдается общая проблема: некорректный контакт рук и ног с поверхностью и сложность точного определения движений. Вероятно, для менее динамичных анимаций без большого количества беспорядочных и хаотичных движений ИИ-метод мокапа подойдет лучше.
Генерация от Radical
2.3 Генерация анимации для проекта с помощью MoGen Motorica
Ордалион / 2023 / превиз
Если не выходит получить идеальную анимацию через текстовую генерацию и ИИ мокапы, то наверняка получится если мы обратимся к следующему инструменту: MoGen.
MoGen / Motorica
Из множества параметров, больше всего под характер персонажа и происходящее в сценах подойдут эти: крутой парень, напуган
/разворот на месте, реакция
/бег по диагонали
/бег с остановкой
Генерируем наиболее интересную и подходящую нам анимацию и переносим на персонажа.
Сгенерированный бег крутого, чуть напуганного парня
2.4 Создание анимации для проекта с помощью Cascadeur
Раз бег у нас получился, можно попробовать сделать еще и падение для первой сценки, в которой герой бежит и падает. Обратимся к инструментарию Каскадера.
Ставим персонажа в ключевые позы
Довольно быстро, благодаря режиму выстраивания автоматической позы получается примерный блокинг движения.
Анимация в степ ключах
А вот к автофизике есть вопросы. В предыдущем варианте смотрится более адекватно
