Компания Adobe представила Project Music GenAI Control — прототип инструмента, который позволяет пользователям создавать музыку с помощью текстовых подсказок, а затем редактировать звук внутри одного приложения.
Сначала потребуется ввести текстовое описание музыки, которое задаст ей стиль, например «весёлого танца» или «грустного джаза». Встроенные элементы управления редактированием позволят пользователям работать с получившимся результатом, убирая повторы, регулируя темп, интенсивность и структуру. Музыкальные фрагменты можно микшировать, создавать с их помощью минусовки или фоновые мелодии.
Project Music GenAI Control позволит настраивать сгенерированный звук «на основе эталонной мелодии» и увеличивать его длину.
Для демонстрации инструмента Adobe загрузила общедоступный контент, но неясно, можно ли будет добавлять свои звуки.
«Одна из самых интересных особенностей инструмента заключается в том, что он предназначен не только для генерации звука. Он выводят его на уровень Photoshop, предоставляя творческим людям такой же глубокий контроль над формированием, настройкой и редактированием звука. Это своего рода управление музыкой на уровне пикселей», — отмечает Николас Брайан, старший научный сотрудник Adobe Research.
Проект Music GenAI разрабатывали в сотрудничестве с Калифорнийским университетом и Школой компьютерных наук Университета Карнеги-Меллон. Пока работа над ним находится на «ранней стадии». Инструмент всё ещё недоступен для широкой публики, и дата его выпуска не объявлена.
Ранее компании выпускали аналогичные инструменты Google MusicLM и Meta* AudioCraft. Они позволяют пользователям генерировать аудио только с помощью текстовых подсказок, но не имеют поддержки редактирования музыкального вывода.
Meta Platforms*, а также принадлежащие ей Facebook** и Instagram**:* признана экстремистской организацией, её деятельность в России запрещена;** запрещены в России.
Источник: habr.com
