Яндекс представили нейросеть YandexART.
«Яндекс» представил нейросеть Yandex AI Rendering Technology (YandexART), создающую изображения и анимацию по текстовым запросам пользователей.
Она использует метод каскадной диффузии, начиная с генерации изображений и кадров в соответствии с запросом пользователя и постепенно увеличивая их разрешение с добавлением деталей.
По утверждению компании, YandexART создает более реалистичную и детализированную графику по сравнению с предыдущим поколением диффузионных моделей. Увеличен размер обучающего набора данных до 330 млн картинок с текстовым описанием, что, в сочетании с новым алгоритмом распознавания текстов, улучшило результаты на 60%.
Нейросеть также более точно обрабатывает особенности лиц, глаз и рук, что позволяет создавать фотореалистичные портреты. Для улучшения генерации применяется «дообучение с подкреплением», при котором специалисты выбирают удачные и неудачные изображения, обучая нейросеть лучше понимать, как изображать различные объекты и явления.
пишет Коммерсантъ
