Китайская певица Chris Lee записала клип на песню Rainy Day, But We Are Together, все спецэффекты к которому без помощи человека нарисовала нейросеть.

Система искусственного интеллекта (ИИ) Intel отслеживала движения певицы и ее мимику. Сохраняя распознанный образ человека, нейросеть накладывала в процессе необходимые спецэффекты: мерцание, струи дождя, интерьеры, смена пространств, мыльные пузыри, капли, проекции и т.д.

При этом, система ИИ опиралась только на распознавание образа. Нейросеть создала трехмерный макет лица и научилась отслеживать его в реальном времени, учитывая жесты и мимику. Певице не пришлось надевать специальный костюм или использовать маркеры, датчики и трекеры.

Видео-ссылка ->