Компания Luma выпустила новую модель искусственного интеллекта, которая позволяет пользователям создавать видео, начиная с начального и конечного кадров.

Компания Luma, занимающаяся разработкой видео и 3D-моделей на основе искусственного интеллекта и поддерживаемая a16z, выпустила новую модель под названием Ray3 Modify, которая позволяет пользователям модифицировать существующие видеоматериалы, предоставляя эталонные изображения персонажей, сохраняющие характеристики исходного видео. Пользователи также могут указать начальный и конечный кадры, чтобы направлять модель при создании переходных сцен.

В четверг компания заявила, что модель Ray3 Modify решает проблемы сохранения актерской игры при редактировании или создании эффектов с использованием ИИ для креативных студий. Стартап заявил, что модель лучше следует исходному видеоматериалу, позволяя студиям использовать актеров для создания креативных или рекламных роликов. Компания Luma отметила, что новая модель сохраняет исходные движения актера, темп, направление взгляда и эмоциональную подачу, одновременно преобразуя сцену.

С помощью Ray3 Modify пользователи могут предоставить эталонный образ персонажа для трансформации в исходный видеоматериал и преобразовать внешность актера в этого персонажа. Этот эталон также позволяет создателям сохранять такую информацию, как костюмы, сходство и личность, на протяжении всей съемки.

Более того, пользователи также могут задавать начальные и конечные опорные кадры для создания видео с использованием новой модели Ray3 Modify. Это полезно для создателей контента при управлении переходами, движениями и поведением персонажей, обеспечивая при этом непрерывность между сценами.

«Генеративные видеомодели невероятно выразительны, но ими сложно управлять. Сегодня мы рады представить Ray3 Modify, который сочетает реальный мир с выразительностью ИИ, предоставляя при этом полный контроль творческим группам. Это означает, что творческие коллективы могут снимать выступления на камеру, а затем немедленно изменять их, чтобы они происходили в любом мыслимом месте, менять костюмы или даже возвращаться и переснимать сцену с помощью ИИ, не воссоздавая физическую съемку», — заявил в своем заявлении Амит Джайн, соучредитель и генеральный директор Luma AI.

Компания Luma заявила, что новая модель доступна пользователям через платформу Dream Machine. Компания, конкурирующая с такими гигантами, как Runway и Kling, представила возможности редактирования видео в июне 2025 года.

Выпуск модели состоялся после нового раунда финансирования в размере 900 миллионов долларов, возглавляемого компанией Humain, занимающейся разработкой искусственного интеллекта и принадлежащей Государственному инвестиционному фонду Саудовской Аравии. О таком раунде было объявлено в ноябре. В раунде также приняли участие существующие инвесторы, такие как a16z, Amplify Partners и Matrix Partners. Кроме того, стартап планирует совместно с Humain построить в Саудовской Аравии кластер искусственного интеллекта мощностью 2 ГВт.

Источник: techcrunch.com