Yandex представил новое поколение нейросети YandexART 2.0
Yandex представил новое поколение зрительной нейросети – YandexART 2.0. Модель научилась:
- создавать надписи прямо на изображениях,
- придерживаться нескольких стилей на одной картинке,
- располагать объекты в пространстве и относительно друг дружку наиболее естественно,
- учесть при генерации больше деталей из текстового запроса.
Юзеры могут использовать новейшие способности, чтоб развивать свое дело, к примеру: сделать логотип для бренда, этикетку продукта, иллюстрации для веб-сайта и постов в соц сетях, а компании – чтоб повысить эффективность маркетинговых и рекламных кампаний.
О технологии YandexART 2.0
В базу YandexART 2.0 легла собственная разработка компании – новенькая гибридная архитектура модели, которая соединяет свойство работы сверточной и трансформерной нейросетей. Сверточная модель работает по принципу людского глаза и выявляет на картинке принципиальные признаки – края, текстуры и формы. При всем этом нейросеть с таковой архитектурой не умеет учесть длиннющий контекст (потому ей тяжело управляться с огромным количеством деталей в промтах), зато это умеет трансформер.
Объединение 2-ух этих моделей в YandexART 2.0 позволило ей поточнее следовать текстовым запросам. Так, сейчас она умеет придерживаться нескольких стилей в одном изображении и может, к примеру, сгенерировать фотореалистичную банку лимонада, на этикетке которой будет аниме-персонаж.
YandexART училась на сотках миллионов пар картинок и текстовых описаний к ним.
Чтоб повысить свойство этих текстов и создать их наиболее точными, Yandex употреблял свою VLM-модель. Она анализировала изображения и детально обрисовывала, что на их находится. YandexART 2.0 научили на усовершенствованных данных, что посодействовало нейросети учесть больше деталей из запроса юзера.
Зрительные нейросети могут генерировать отдельные буковкы, но для того, чтоб они начали составлять из их слова, требуется доп обучение (педагогический процесс, в результате которого учащиеся под руководством учителя овладевают знаниями, умениями и навыками) на большенном количестве примеров.
Yandex расширил обучающий датасет YandexART 2.0 несколькими сотками тыщ изображений с текстом. Так нейросеть научилась создавать надписи латинскими знаками на картинах.
Для замера свойства работы нейросети Yandex разработал новейшую систему оценки. Она содержит в себе четыре главных параметра: релевантность, эстетичность, дефектность и комплексность, другими словами сложность и детализированность рисунки. Так, к примеру, YandexART 2.0 выиграла у Midjourney v6.1 в 66% случаев по аспекту комплексности, в 58% по эстетичности и фактически сравнялась по доле побед в релевантности запросам юзеров.

YandexART для бизнеса
YandexART 2.0 уже доступна на пасмурной платформе Yandex Cloud. Ее можно употреблять через API, чтоб интегрировать генерацию изображений в свои приложения, также протестировать в демо-режиме, чтоб подобрать лучший промт. Нейросеть лучше осознает запросы юзера, потому компании сумеют резвее и лучше создавать близкие к реальности изображения для рекламных и маркетинговых кампаний. Предприниматели сумеют генерировать иллюстрации для статей и соц сетей, создавать баннеры либо разрабатывать варианты брендирования одежки.
При помощи YandexART 2.0 уже можно создавать маркетинговые объявления в Yandex Директе. На данный момент 11% рекламодателей употребляют рисунки, сгенерированные при помощи YandexART снутри сервиса. По результатам тестов, внедрение нейрообъявлений в сочетании с своими креативами может прирастить эффективность маркетинговой кампании на 10-15%.
YandexART для юзеров
Юзеры могут употреблять YandexART в чате с Алисой при подключении функции Про.
Алиса может не попросту сгенерировать картину, да и дополнить ее и поменять так, как захотит юзер. Промты можно уточнять прямо в режиме диалога. К примеру, поначалу сказать: «Алиса, нарисуй свечу ручной работы», а опосля получения результата добавить: «вокруг еловые ветки».
Алиса поможет сделать аватарку для соцсети либо иконку для приложения, логотип либо принт на футболку, забавную открытку для друга либо иллюстрацию для поста.
Юзеры, которые подключили опцию Алису Про, могут безлимитно создавать изображения в мобильной и десктопной версии в различных форматах, при всем этом генерация картинок будет занимать всего несколько секунд.
Напомним, сначала сентября Yandex запустил усовершенствованную версию YandexART для генерации маленьких видео. А в июле благодаря YandexART в Шедевруме возникла способности создавать клипы из видео, изображений и Фильтрумов.