Яндекс показал свою нейросеть YandexART
10/18/2023
Компания представила нейросеть Yandex AI Rendering Technology (YandexART), которая создает изображения и анимацию в ответ на текстовые запросы пользователей.
Компания представила нейросеть Yandex AI Rendering Technology (YandexART), которая создает изображения и анимацию в ответ на текстовые запросы пользователей.
YandexART формирует изображения методом каскадной диффузии: сначала нейросеть генерирует картинки и кадры в соответствии с запросом пользователя, а затем поэтапно увеличивает их разрешение, насыщая деталями. В сравнении с предыдущим поколением диффузионной модели, YandexART создает более реалистичную и детализированную графику. По итогам внутренней оценки Яндекса, ее результаты лучше в 60 % случаев.
Для улучшения качества работы нейросети разработчики увеличили размер обучающего набора данных в полтора раза – до 330 миллионов изображений с текстовым описанием. Для обучения YandexART используются самые эстетичные картинки – они отбираются при помощи трех режимов фильтрации. Новый алгоритм распознавания текстов помогает нейросети лучше понимать пожелания пользователей. Кроме того, нейросеть качественнее прорабатывает особенности лиц, глаз и рук, что позволяет ей делать фотореалистичные портреты.
С целью улучшения качества генерации используется дообучение с подкреплением. Специалисты компании отсматривают, например, сразу несколько сотен или тысяч созданных с помощью YandexART капибар и отмечают удачные и неудачные изображения. Это позволяет нейросети понять, как именно лучше и правильнее изображать животных, персонажей, объекты, явления и не только.
Продукты Яндекса на нашем сайте:
Яндекс Телемост – сервис для организации видеовстреч и конференций
Яндекс Маркет – услуги для продавцов маркетплейсов
Яндекс 360 – корпоративное рабочее пространство