Luma представляет инновационную модель искусственного интеллекта для создания видео по заданным ключевым кадрам

Калифорнийская компания Luma, которой удалось привлечь инвестиции от фонда a16z и стать одним из лидеров в области AI-видео и 3D-моделей, анонсировала новую раз...

📋 Обзор

Калифорнийская компания Luma, которой удалось привлечь инвестиции от фонда a16z и стать одним из лидеров в области AI-видео и 3D-моделей, анонсировала новую разработку — модель Ray3 Modify. Эта технология делает возможным создание плавных видеороликов, исходя из всего лишь двух ключевых кадров: начального и конечного. Такой подход открывает новые горизонты для видеомонтажа, особенно в сфере развлечений, рекламы и промышленного дизайна.

Luma представляет инновационную модель искусственного интеллекта для создания видео по заданным ключевым кадрам Особенность Ray3 Modify заключается в том, что пользователи могут загружать исходное видео и задавать параметры для его модификации. Для сохранения оригинальной динамики и исполнения персонажа, пользователи предлагают изображения образцов персонажа или объекта, на основе которых модель сохраняет характерные особенности и манеры. В результате создается убедительный переход между введенными кадрами, плавно показывающий развитие сценария. Эта технология может найти широкое применение в российских реалиях, например, для восстановления и модернизации устаревших видеоматериалов или для создания новых сцен при минимальных временных затратах. В условиях, когда массовое производство видеоконтента в России востребовано и зачастую сталкивается с нехваткой артистов или сложностями с согласованием съемок, возможность автоматизированного создания полноценного видео по двум ключевым кадрам может стать настоящим прорывом. Разработчики подчеркивают, что Ray3 Modify решает проблему необходимости создания полномасштабных сценариев или дополнительных съемок для дополнения сюжетных линий. Вместо этого, модель может автоматически генерировать промежуточные кадры, сохраняя заложенную хореографию и мимику персонажей. Это особенно актуально для российских видеопродакшенов, которые часто работают с ограниченными бюджетами и ищут новые инструменты для оптимизации работы. Хотя технология пока находится в стадии активного тестирования, она уже вызвала интерес среди профессиональных видеомейкеров и дизайнеров в России и за рубежом. В перспективе, подобные модели позволят создавать видео с меньшим числом специалистов, делая производство более доступным, а качество — на уровне больших студий. Также нельзя исключать интеграцию этой технологии в системы видеомонтажа и анимации, что откроет новые бизнес-модели и возможности для обучения, реставрации исторического контента и создания виртуальных персонажей с реалистичной мимикой и движениями.