YandexART

2024

YandexART 1.3 с латентной диффузией

Яндекс 24 апреля 2024 года представил диффузионную нейросеть YandexART 1.3. Она перешла на новую технологию для генерации изображений — латентную диффузию. Кроме того, датасет, на котором обучалась модель, был увеличен в 2,5 раза. Благодаря этому YandexART лучше понимает текстовые запросы и создаёт ещё более реалистичные изображения в разных форматах. Обновленная версия нейросети уже применяется в Шедевруме, а позднее появится и в других сервисах Яндекса.

Технология латентной диффузии потребляет меньше вычислительных ресурсов и позволяет создавать более реалистичную графику. Она формирует промежуточное представление картинки в виде латентного кода — компактного описания, содержащего основную информацию об изображении в сжатой форме. Затем нейросеть за один шаг разворачивает код в полноценное изображение высокого разрешения. Такой подход более эффективен, чем многоэтапное уточнение картинки в каскадной диффузии.

Яндекс

Чтобы модель лучше понимала запросы пользователей, в датасет, на котором она обучалась, были добавлены синтетические тексты — сгенерированные нейросетью подробные описания изображений. Сам набор данных был увеличен до более чем 850 миллионов пар картинок с текстом. Для того чтобы YandexART учитывала больше деталей из промта, в новой модели используются не один, а два текстовых энкодера. С их помощью YandexART распознаёт текстовый запрос пользователя и переводит его на машинный язык.

Кроме того, обновление YandexART даст пользователям возможность создавать изображения в разных форматах, таких как 16:9, 4:3 или 3:4. Теперь изображения, созданные в Шедевруме, можно будет использовать, например, для обложек журналов или фотообоев на телефон.

По результатам замеров асессорами Яндекса, нейросеть YandexART 1.3 выигрывает в 57 процентах случаев в сравнении с Midjourney V5.2 и в 63 процентах случаев в сравнении с предыдущей версией YandexART 1.2.

Доступность в "Яндекс.Директе"

Предприниматели, у которых нет сайта, смогут рекламировать свои товары и услуги в Яндекс.Директе с помощью нейросетей. Об этом Яндекс сообщил 24 апреля 2024 года. Нейросеть YandexART нарисует уникальные иллюстрации. Подробнее здесь.

Открытие доступа к API

9 апреля 2024 года «Яндекс» сообщил об открытии доступа к API нейросети для создания иллюстраций YandexART. Компании могут воспользоваться инструментом в сервисе Yandex Foundation Models на облачной платформе Yandex Cloud. Нейросеть доступна бесплатно.

Используя API нейросети YandexART, предприниматели могут создавать изображения для рекламы и социальных сетей, дизайн-макеты и иллюстрации для социальных сетей и книг. Кроме того, API поможет встроить генерацию картинок в сервисы и веб-приложения.

Яндекс

Отмечается, что в рамках закрытого тестирования YandexART уже попробовали несколько компаний. Так, один из крупных ритейлеров (его имя не называется) применяет нейросеть для создания уникального дизайна подарочных карт. Как отмечают в «Яндексе», используя этот искусственный интеллект, клиенты получат возможность ввести текстовый запрос, после чего смогут выбрать из нескольких сгенерированных вариантов.Рынок ИТ-услуг в России: оценки, тренды, крупнейшие участники. Обзор и рейтинг TAdviser 298.9 т

С 9 апреля 2024 года доступ к сервису открыт большему числу пользователей. На основе YandexART работает несколько собственных продуктов «Яндекса». В компании отмечают, что нейросеть YandexART постоянно дорабатывается для улучшения качества генерации. Например, специалисты компании смотрят несколько изображений и отмечают наиболее удачные и соответствующие запросу. Это помогает лучше различать объекты и ускорять работу с нейросетью, что особенно важно для бизнес-сценариев, подчеркнули в «Яндексе».

В основе работы сервиса лежит метод каскадной диффузии, применяемый в создании изображения. Сначала программа генерирует картинки и кадры в соответствии с запросом пользователя, а после этого она поэтапно увеличивает их разрешение, насыщая деталями. Благодаря этому достигается реалистичная и детализированная графика, добавили в «Яндексе».

2023

Возможность создавать изображения товаров на «Яндекс.Маркете»

На Яндекс.Маркете продавцы теперь могут бесплатно создавать изображения товаров с помощью диффузионной нейросети YandexART. Достаточно загрузить фото продукции на однотонном фоне — и нейросеть сгенерирует реалистичные изображения, которые как можно лучше покажут товар в подходящем окружении. Например, если это кофемашина, нейросеть добавит её в интерьер кухни, а если игрушка — в обстановку детской комнаты. Об этом Яндекс сообщил 25 декабря 2023 года.

Данная технология не только упрощает создание контента, но позволяет сократить расходы на фотосъёмку. Маркет подсчитал, что на контент для одной карточки товара продавцы тратят от 5 000 до 7 000 рублей. Теперь можно обойтись без профессиональных съёмок: например, достаточно взять смартфон с хорошей камерой, сфотографировать товар на нейтральном фоне, а всё остальное сделает нейросеть.

Создавать изображения товаров можно в личном кабинете продавца на Маркете. Если получившиеся варианты не устраивают — сервис позволяет сгенерировать новые сколько угодно раз. Лучшие изображения можно сразу добавить в карточку товара на Маркете нажатием одной кнопки. Ещё продавец может бесплатно скачать картинки в хорошем качестве — например, чтобы использовать на других площадках.

На декабрь 2023 года новый инструмент работает в бета-версии и доступен для части категорий, в которые входит больше 600 тыс. товаров. Маркет будет развивать технологию и добавлять в неё новые функции.

Недавно у продавцов на сервисе также появилась возможность с помощью нейросети бесплатно генерировать названия и описания товаров, а ещё рекламные баннеры. В ноябре 2023 года Маркет рассказал, что таким образом уже 12 500 продавцов придумали названия товаров, 17 700 — хотя бы раз создали описание продукции.

Анонс продукта

18 октября 2023 года «Яндекс» представил нейросеть YandexART, создающую реалистичные картинки и анимации по текстовым запросам пользователей. По словам разработчиков, технология «знает» известные места и города России, выдающихся личностей разных эпох и персонажей мультфильмов и сказок. Она уже интегрирована в приложение «Шедеврум».

По сравнению с предыдущим поколением диффузионной модели, которая использовалась в «Шедевруме», YandexART создает более реалистичную и детализированную графику. По итогам внутренней оценки асессоров ее результаты лучше в 60% случаев, утверждают в «Яндексе».

Для улучшения качества работы нейросети размер обучающего набора данных увеличили в 1,5 раза, до 330 млн картинок с текстовым описанием. Изображения, используемые для обучения YandexART, отбирают с помощью трех режимов фильтрации.

С YandexART можно создавать потрясающие изображения: красивые, захватывающие, смешные. Даже если совсем не умеете рисовать — нужно только написать нейросети подробный и понятный запрос, - говорится в сообщении компании.

Как пояснили разработчики, YandexART создаёт изображения и анимацию методом каскадной диффузии — сначала генерирует картинки и кадры по запросу, а затем поэтапно добавляет детали и увеличивает их разрешение. Отмечается, что художники, музыканты, дизайнеры и иллюстраторы могут использовать YandexART для творческих экспериментов и поиска вдохновения. Нейросеть помогает им создавать обложки альбомов, театральные декорации, костюмы и другие арт-объекты.

Кроме того, YandexART создает изображения для рекламы. Пользователи «Яндекс. Бизнеса» могут выбрать для объявления картинку, которую сгенерировала нейросеть. В будущем разработчики планируют добавить нейросеть в «Клавиатуру» (пользователи смогут сгенерировать картинку и установить её фоном) и в другие сервисы.^[1]

Примечания