Яндекс представил диффузионную нейросеть Yandex AI Rendering Technology (YandexART), которая создаёт изображения и анимацию в ответ на текстовые запросы пользователей. YandexART создаёт изображения методом каскадной диффузии. При обучении модели изображения «портят», добавляя к ним случайный шум, как при диффузии жидкости или газа. Затем их показывают модели, задача которой — «восстановить» изображение.
По сравнению с предыдущим поколением диффузионной модели, которая использовалась в Шедевруме, YandexART создаёт более реалистичную и детализированную графику. По итогам внутренней оценки асессоров Яндекса её результаты лучше в 60% случаев. Для улучшения качества работы нейросети разработчики увеличили размер обучающего набора данных в 1,5 раза — до 330 миллионов картинок с текстовым описанием. Для обучения YandexART используются самые эстетичные картинки — они отбираются при помощи трёх режимов фильтрации. Новый алгоритм распознавания текстов помогает нейросети лучше понимать пожелания пользователей. Кроме того, нейросеть качественнее прорабатывает особенности лиц, глаз и рук, что позволяет ей делать фотореалистичные портреты.
YandexART можно попробовать:
- В Шедевруме YandexART помогает пользователям генерировать изображения и видео. С момента запуска приложения они создали более 100 миллионов генераций;
- При создании рекламных объявлений в Яндекс Бизнесе можно выбрать подходящую иллюстрацию из числа уже сгенерированных нейросетью YandexART. В нейростоке Яндекс Бизнеса представлено около 3000 картинок для 650 видов деятельности. Они доступны для 82% рекламных кампаний и уже сейчас используются почти в каждом пятом размещении.
- Скоро в Яндекс Клавиатуре с помощью YandexART можно будет сгенерировать картинку по текстовому описанию и установить её в качестве фона.
Источник: Новости компании Яндекс