Компания «Яндекс» разработала первую версию единой нейросетевой модели Alice AI ART 2.0, которая может как генерировать, так и редактировать изображения по инструкции пользователя. Об этом сообщает издание ixbt.com со ссылкой на заявление компании.

«Раньше генерация и редактирование изображений развивались как два независимых технологических стека со своими моделями, данными, метриками и процессами обучения, а любое улучшение приходилось внедрять отдельно для каждой системы», — рассказали в «Яндексе».

Переход к единой модели позволил объединить оба сценария в общей архитектуре. Благодаря этому знания, полученные при обучении генерации, автоматически используются и при редактировании.

Разработчики отмечают, что нововведения особенно заметны при работе с редкими визуальными концептами. Если модель научилась создавать по текстовому запросу изображения с элементами хохломской росписи или самоваром, она сможет корректно использовать эти же объекты при редактировании существующих картинок.

Для более точной генерации в архитектуру внедрили отдельный модуль, который расширяет запрос пользователя. По подсчетам компании, это повысило точность редактирования изображений примерно на 12% без изменения самой генеративной модели.

Нейросеть Alice AI ART 2.0 уже работает в «Алисе AI» и «Шедевруме».

Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.