Компания Luma AI, работающая в области передового искусственного интеллекта и многомодального ИИ общего назначения, представила Ray3 Modify — новую технологию для улучшения реальных актёрских исполнений с помощью ИИ, позволяющую создавать сцены уровня Голливуда. Решение доступно на платформе Dream Machine и направлено на устранение одной из ключевых проблем ранних систем генерации видео: неспособности надёжно сохранять человеческое исполнение.
Ранее при генерации видео с помощью ИИ было трудно удерживать темп, движения и эмоциональный замысел актёров при трансформации сцен. Ray3 Modify создаёт материал в ответ на входную съёмку с участием человека, что даёт возможность брендам сотрудничать с актёрами для продвижения продуктов и персонализации контента при сохранении согласованности с оригинальной подачей. Для кинематографистов это открывает возможность снимать актёров в любых мирах, сценах и стилях.
В Ray3 Modify исполнитель, оператор или физическая входная съёмка становятся источником управления для ИИ. Система следует реальным движениям, темпу, кадрированию и эмоциональной подаче. Генерация, обусловленная входной съёмкой, значительно сокращает угадывания и помогает автору приблизить кадры к первоначальному замыслу.
Ray3 Modify поддерживает новый класс рабочих процессов в производстве, где важны предсказуемость, непрерывность и воспроизводимость. Технология сохраняет исходное исполнение актёра, одновременно позволяя целенаправленно менять окружение, стилизацию, операторскую работу и визуальную интерпретацию сцены с учётом контекста.
Амит Джайн, генеральный директор и сооснователь Luma AI, отметил, что генеративные видеомодели очень выразительны, но ими сложно управлять. По его словам, Ray3 Modify сочетает реальный материал с возможностями ИИ и возвращает контроль творческим командам: они могут снять исполнение камерой, а затем мгновенно изменить локацию, костюмы или «переснять» сцену с помощью ИИ без повторной физической съёмки.
Новые возможности Ray3 Modify усиливают позиции Ray3 в области производства с применением ИИ и ориентированы на использование в медиа, рекламных проектах, визуальных эффектах для кино и в работе творческих профессионалов. Функции разработаны для реальных производственных циклов и профессиональных пайплайнов.
Кадровые привязки (начальный и конечный кадры). Ray3 Modify впервые вводит управление начальным и конечным кадрами в рабочий процесс «видео в видео». Это позволяет управлять переходами, поведением персонажей и сохранять пространственную непрерывность при длинных проходах камеры, раскрытиях и сложной сценической режиссуре.
Справочник персонажа. Функция даёт возможность наложить пользовательскую идентичность персонажа на оригинальное исполнение актёра. Это обеспечивает сохранение сходства, костюма и непрерывности идентичности конкретного персонажа на протяжении всего кадра, что важно для проектов с участием актёров и ИИ.
Сохранение исполнения. Ray3 Modify удерживает исходные движения актёра, тайминг, направление взгляда и эмоциональную подачу как основу сцены. При этом система допускает намеренные изменения визуальных характеристик и окружения.
Улучшённый видеопайплайн Modify. Новая архитектура модели с высоким уровнем сигнала обеспечивает более надёжное соблюдение физических движений, композиции и исполнения. Благодаря этому сцены меняются так, чтобы уважать входную съёмку с участием человека и позволять целенаправленные правки без нарушения непрерывности или идентичности.
В совокупности эти возможности позиционируют Ray3 Modify как инструмент следующего поколения для гибридного ИИ, где творческий контроль начинается с исполнителя или камеры, а ИИ расширяет, интерпретирует и преобразует это направление. Решение предназначено для профессиональных творческих команд, стремящихся сохранить авторитет исполнителя при одновременном расширении визуальной выразительности.
Комментариев