Моушн-дизайн традиционно остается одной из самых ресурсоемких задач в продакшене. Написание сценария, подбор футажей, анимация инфографики, синхронизация звука – всё это требует часов рутинной работы в тяжелых редакторах. Мы решили упростить этот процесс и добавили в наш пайплайн новый узелок – Grom Motion.
Он берет на себя монтаж видео, позволяя генерировать полноценную графику с анимацией по одному текстовому промпту.
Всего с помощью одного промпта Grom Motion позволяет распознать речь, добавить озвучку, анимированные субтитры или графику, чтобы создать рилс или инфографику под ключ.
Что под капотом и как это работает?
Grom Motion – комплексный инструмент, который работает внутри узлового интерфейса (нодового воркфлоу). Найти его можно на GPTunneL.
Что умеет делать узел Grom Motion:
-
Генерация недостающего контента: модель сама создает изображения, генерирует музыку под заданный хронометраж и озвучивает введенный текст.
-
Умная нарезка и синхронизация: алгоритмы режут сцены точно в долю трека, добавляя звуковые переходы.
-
Создание инфографики с ИИ: автоматическая отрисовка графиков, диаграмм, бегущих цифр и идеальных шрифтов без искажений, что критично для коммерческого моушена.
-
Мультиформатность: сборка в пропорциях 16:9, 9:16 или 1:1, длительностью от 6 до 60 секунд.
-
Интеграция пользовательских исходников: можно подать на вход узла свои аудиодорожки, картинки или видео.
-
Генерация видео со звуком: на выходе вы получаете не обычный секвенс, а готовый mp4-файл со сведенной аудиодорожкой.
Примеры созданных роликов
Открыть больше примеров
От говорящей головы к динамичному видео
Особенно полезной модель оказалась для автоматизации конвейера. Допустим, у вас есть статичное видео с экспертом в кадре. Вы загружаете исходник в воркфлоу, и модель выполняет всю оставшуюся работу:
-
Распознает речь.
-
Создает субтитры с тайм-кодами.
-
Анализирует смысл сказанного и подкладывает релевантную анимированную инфографику поверх видео.
В итоге обычный говорящий кадр превращается в динамичный ролик даже без открытия Premiere Pro или After Effects.
Модель понимает контекстные правки – достаточно выделить фрагмент на таймлайне и написать текстом, что нужно изменить.
Как запустить пайплайн?
Работать с моделью нужно в разделе «Воркфлоу».
Если вы еще не знакомы с нодовой логикой работы (когда результат одной нейросети по цепочке передается другой без скачивания файлов), рекомендуем начать с этих материалов:
-
Воркфлоу: что это простыми словами и как собрать AI-сценарий
-
Первый воркфлоу: от референса до видео
Сборка цепочки с Grom Motion выглядит так:
-
Открываем холст Воркфлоу (https://gptunnel.ru/workflow).
-
Правой кнопкой мыши добавляем узел «Моушн-ролик».
-
При необходимости подключаем к ней узлы с исходными данными (например, ноду с аудиофайлом или сгенерированным текстом).
-
Прописываем промпт: задаем тему, стиль анимации и правила использования исходников.
-
Выбираем пропорции и длительность. Жмем «Создать».
Вот примеры того, как выглядят промпты для узла «Моушн-видео» для достижения результатов:
Экономика генерации:
Стоимость работы Grom Motion составляет 10 рублей за секунду готового ролика (минимальный порог – 100 рублей за генерацию).
Переходи в «Воркфлоу» по ссылке ниже, чтобы попробовать Grom Motion! Для начала работы с новым инструментом – создай воркфлоу (с нуля или через шаблон), щёлкни правой кнопкой по холсту и выбери «Моушн-видео».
GPTunneL® — Нейро-офис и агрегатор нейросетейgptunnel.ru
А как вы сейчас решаете задачи по быстрому созданию моушн-графики? Делитесь в комментариях!
Источник: habr.com