Sight Span позволяет выбирать новый ракурс, генерируя недостающие объекты и фон за пределами кадра. Пока это демонстрация технологии: ее появление в Creative Cloud или Firefly не гарантировано.
Adobe показала на конференции Max экспериментальные ИИ-инструменты для работы с изображениями, персонажами и звуком, сообщает технологическое издание The Verge. Один из проектов, Sight Span, превращает плоскую картинку в трехмерную сцену, по которой можно перемещаться и выбирать новую точку съемки.
Недостающие объекты и фон за пределами исходного кадра система генерирует сама. Во время перемещения изображение выглядит пиксельным и нечетким, но после выбора ракурса инструмент восстанавливает качество. Sight Span работает с фотографиями, картинами и иллюстрациями и может сохранять их художественный стиль. По наблюдению автора статьи, при смене ракурса остаются узнаваемыми даже черты лица и татуировки. При этом результат содержит сгенерированные детали, которых не было на исходном снимке.
Другой эксперимент, Project Screen Test, позволяет развивать характер виртуального персонажа в разговоре с ним. Сначала автор задает базовые черты и голос: выбирает готовый вариант, описывает звучание словами или загружает аудиообразец. Затем в беседе, похожей на видеозвонок, уточняет биографию героя, его цели, страхи, недостатки и манеру двигаться. Получившиеся черты можно исправить вручную, а затем описать сцену и создать анимационную пробу. Пока это отдельный эксперимент; его возможная связь с существующими видеосервисами Adobe не определена.
Источник: hi-tech.mail.ru