NVIDIA и Google оживляют любимых персонажей с помощью ИИ.

Парижский Диснейленд впервые показал робота Олафа, созданного на базе новейших разработок Disney Imagineering. Герой «Холодного сердца» появился перед зрителями не на экране, а как полноценный физический персонаж, который умеет двигаться, выражать эмоции и реагировать на людей почти так же, как в мультфильме. Новинку представили президент Walt Disney Imagineering Брюс Воан и руководитель Диснейленда Париж Наташа Рафа́льски. Для Imagineering это один из самых заметных технологических рывков, поскольку впервые в таком масштабе сочетаются робототехника, анимация и методы искусственного интеллекта.
Презентация совпала с выходом нового выпуска серии We Call It Imagineering, где компания показывает технологии, которые формируют будущее её парков. Над Олафом работали инженеры, аниматоры и исследователи в области искусственного интеллекта. Цель состояла в том, чтобы персонаж воспринимался живым, а техническая часть оставалась на втором плане, не отвлекая гостей. В Imagineering подчёркивают, что работа всегда начинается с самого персонажа и эмоций, которые он должен передавать, а всё остальное подстраивается под это требование.
Создание естественного движения стало одним из самых сложных этапов. Команда определяла, как должны двигаться глаза, какая манера походки подходит персонажу, как он жестикулирует и реагирует на собеседника. Внешний вид тоже прорабатывали детально: использовали волокна, отражающие свет так же, как свежий снег, а мягкий костюм дал роботу гибкость, которую невозможно получить с жёсткими материалами.
Эта работа оказалась значительно труднее, чем предыдущие роботизированные проекты Disney, включая дроидов BDX из «Звёздных войн». Для Олафа требовалась совсем другая выразительность и точность. Чтобы добиться нужной пластики, команда использовала методы глубокого обучения с подкреплением: в симуляции робот учился воспроизводить движения, созданные аниматорами, и постепенно перенимал их манеру до тех пор, пока жесты не становились убедительными.
Для ускорения этого процесса Imagineering разработала симуляционный фреймворк Newton вместе со специалистами NVIDIA и Google DeepMind. Он построен из модулей, которые позволяют быстро собирать симуляторы, работающие на GPU. Один из ключевых компонентов, Kamino, значительно сокращает время, необходимое для отработки сложных элементов: ходьбы, жестов и взаимодействия с окружающими объектами. Благодаря этому инженеры могли оперативно корректировать стиль движений, пока Олаф не начинал вести себя так, как его представляют аниматоры.
Эти технологии позволили перенести многие особенности персонажа из анимации в реальный мир. У Олафа подвижные глаза, полностью артикулируемый рот, съёмный нос и возможность вести короткий диалог. Внешняя поверхность создаёт характерное «снежное» мерцание, а гибкая структура костюма даёт роботу свободу движения, недостижимую для обычных механических оболочек. Такие решения применяют и в других проектах Disney — от, опять же, дроидов до самобалансирующегося робота H.E.R.B.I.E., — и они заметно ускоряют создание новых персонажей.
В ближайшее время Олаф начнёт встречать гостей на шоу Arendelle Bay в зоне World of Frozen в Диснейленде.