Модель научилась создавать надписи прямо на изображениях, придерживаться нескольких стилей на одной картинке, располагать объекты в пространстве и относительно друг друга более естественно и учитывать при генерации больше деталей из текстового запроса. Пользователи могут применять новые возможности, чтобы развивать своё дело, например: создать логотип для бренда, этикетку продукта, иллюстрации для сайта и постов в социальных сетях, а компании — чтобы повысить эффективность рекламных и маркетинговых кампаний.
В основу YandexART 2.0 легла собственная разработка компании — новая гибридная архитектура модели, которая сочетает качество работы свёрточной и трансформерной нейросетей. Свёрточная модель работает по принципу человеческого глаза и выявляет на картинке важные признаки — края, текстуры и формы. При этом нейросеть с такой архитектурой не умеет учитывать длинный контекст (поэтому ей трудно справляться с большим количеством деталей в промтах), зато это умеет трансформер. Объединение двух этих моделей в YandexART 2.0 позволило ей точнее следовать текстовым запросам. Так, теперь она умеет придерживаться нескольких стилей в одном изображении и может, например, сгенерировать фотореалистичную банку лимонада, на этикетке которой будет аниме-персонаж.
YandexART обучалась на сотнях миллионов пар картинок и текстовых описаний к ним. Чтобы повысить качество этих текстов и сделать их более точными, Яндекс использовал собственную VLM-модель. Она анализировала изображения и детально описывала, что на них находится. YandexART 2.0 обучили на улучшенных данных, что помогло нейросети учитывать больше деталей из запроса пользователя.
Визуальные нейросети могут генерировать отдельные буквы, но для того, чтобы они начали составлять из них слова, требуется дополнительное обучение на большом количестве примеров. Яндекс расширил обучающий датасет YandexART 2.0 несколькими сотнями тысяч изображений с текстом. Так нейросеть научилась создавать надписи латинскими буквами на картинках.
Для замера качества работы нейросети Яндекс разработал новую систему оценки. Она включает в себя четыре основных параметра: релевантность, эстетичность, дефектность и комплексность, то есть сложность и детализированность картинки. Так, например, YandexART 2.0 выиграла у Midjourney v6.1 в 66% случаев по критерию комплексности, в 58% по эстетичности и практически сравнялась по доле побед в релевантности запросам пользователей.
YandexART 2.0 доступна на облачной платформе Yandex Cloud. Её можно использовать через API, чтобы интегрировать генерацию изображений в свои приложения, а также протестировать в демо-режиме, чтобы подобрать оптимальный промт. Нейросеть лучше понимает запросы пользователя, поэтому компании смогут быстрее и качественнее создавать реалистичные изображения для маркетинговых и рекламных кампаний. Предприниматели смогут генерировать иллюстрации для статей и социальных сетей, создавать баннеры или разрабатывать варианты брендирования одежды.
Нейросеть уже тестируют клиенты Yandex Cloud. Например, сервис Text.ru на базе YandexART создал Нейропомощника Иллюстратора, который позволяет авторам оформлять материалы для своего сайта, блога, канала, группы или магазина на маркетплейсе. Также генеративные нейросети Яндекса использует сервис presentsimple.ai, который автоматически создаёт презентации для работы или учёбы по текстовому запросу. Сервис анализирует и систематизирует материалы с помощью YandexGPT, а изображения к слайдам генерирует с помощью YandexART.
Кроме того, с помощью YandexART 2.0 уже можно создавать рекламные объявления в Яндекс Директе. Сейчас 11% рекламодателей используют картинки, сгенерированные с помощью YandexART внутри сервиса. По результатам экспериментов, использование нейрообъявлений в сочетании с собственными креативами может увеличить эффективность рекламной кампании на 10-15%. Читайте также Управление документацией QA: чек-лист эксперта Управление качеством программного обеспечения (QA) становится очень важным. Одним из ключевых моментов — это правильный подход к управлению документацией. Хорошо организованные документы упростят работу всей команды. В этой статье я составил чек-лист, который поможет вам наладить стандарты, держать документы актуальными. Также расскажу, как внедрить новые подходы QA, чтобы сотрудники не устроили восстание.
Источник: www.it-world.ru
Похожие новости:
Яндекс представил диффузионную нейросеть YandexART 2.0 — в её основе новая гибридная архитектура
Нейросеть YandexART стала лучше понимать запросы пользователей
«Слушая подкасты, ничего не узнаешь, ты должен устать, упасть без задних ног — такой должна быть встреча с образованием»
Мы тут конфу замутили… для эйчаров и рекрутеров: программа HR API 2024