Компания Adobe представила некоторые из своих генерирующих видео-инструментов с ИИ, в том числе новую функцию, позволяющую создавать видеоклипы из изображений. Последняя предварительная версия основана на разрабатываемой видео-модели Firefly, которую Adobe продемонстрировал в апреле и которая должна стать основой для функций редактирования видео и аудио с помощью искусственного интеллекта в приложениях Adobe Creative Cloud.
В новом рекламном тизере показаны кадры, созданные с помощью функции «текст в видео» Firefly, которую Adobe анонсировала (но не продемонстрировала) в начале этого года. Инструмент позволяет пользователям генерировать видеоклипы с использованием текстовых описаний и корректировать результаты с помощью различных «элементов управления камерой», которые имитируют углы наклона камеры, движение и расстояние съемки. Также была продемонстрирована функция преобразования изображения в видео для видео-модели Firefly, которая позволяет генерировать клипы по определенным исходным изображениям.
Новый видео-инструмент Adobe с искусственным интеллектом позволит пользователям выбирать заранее заданные стили съемки, а также описывать желаемые кадры. Изображение: Adobe
Качество сгенерированного видео выглядит на одном уровне с тем, что мы уже видели в модели Sora от OpenAI, которую Adobe также «изучает» в качестве сторонней интеграции для Premiere Pro. Однако продолжительность видео ограничена. Вице-президент Adobe по генеративному ИИ Александр Костин сообщил, что видео, созданные с помощью функций «текст в видео» и «изображение в видео», имеют максимальную длину пять секунд.
Одним из преимуществ собственной модели Adobe перед Sora является обещание, что Firefly «коммерчески безопасен», поскольку ИИ модель обучается на контенте с открытой лицензией и Adobe Stock, что может уменьшить некоторые опасения по поводу нарушения авторских прав.
Функции преобразования текста в видео и изображения в видео будут доступны в бета-версии отдельного приложения Firefly в конце этого года. По словам Adobe, новая видео-модель Firefly в конечном итоге будет интегрирована в приложения Creative Cloud, Experience Cloud и Adobe Express.
Компания также показала несколько дополнительных роликов о грядущей функции «Generative Extend» для Premiere Pro, которая может увеличивать длину существующего видеоматериала, подобно инструменту Generative Expand для фоновых изображений в Photoshop. Adobe утверждает, что эта функция также появится в неустановленную дату «позже в этом году».
Источник: habr.com
