Adobe запустила в сервисе Firefly бета-тест нового ИИ-инструмента, который позволяет создавать аудиоэффекты с помощью голосовых записей вроде «бдыщ» и «цок-цок». Пользователи могут записывать такие звуки синхронно с видео и добавлять к ним текстовое описание — например, «стук копыт по асфальту». В ответ система предложит четыре варианта звукового сопровождения.
Интерфейс напоминает видеоредактор с таймлайном: эффекты можно точно синхронизировать с загруженным роликом. Функция работает как с готовыми видео, так и с созданными в Firefly. При этом генерация речи не поддерживается — только звуковые эффекты: шаги, треск, шорох, удары молнии и тому подобное.
Firefly получил и другие возможности. В частности, в генераторе видео по тексту появилась возможность загрузить эталонное видео для задания композиции. Также теперь можно задать начальный и финальный кадры, между которыми ИИ сгенерирует видео. А ещё добавили стилизованные пресеты вроде векторной графики и аниме.
Новый инструмент для генерации звуков можно опробовать бесплатно в Firefly. Но сам сервис, к сожалению, в России недоступен.
Источник: lifehacker.ru