Компания «Яндекс» рассказала о прототипе нейросети, способной генерировать изображения по текстовым описаниям. Посмотреть результаты её работы может любой желающий — для этого достаточно скачать приложение «Шедеврум» для Android или iOS.
Источник изображений: Яндекс
Нейросеть работает с текстовыми описаниями на русском и английском языках, причём рекомендуется излагать пожелания максимально конкретно: ИИ выполняет работы в разных художественных стилях, подражает известным живописцам и понимает инструкции вроде «фотореализма» и «высокой детализации». Получив текстовое описание, ИИ создаёт базовую версию картинки, после чего в несколько шагов увеличивает её разрешение и добавляет новые детали — такой метод называется каскадной диффузией.
Заброшенная Бурдж-Халифа обросла джунглями, крупным планом
На этапе бета-теста первую версию генеративной модели обучили на 240 млн изображений и соответствующих им текстовых описаний. Работа продолжается — новый объём данных включает 500 млн примеров, поэтому качество работы «Шедеврума» постепенно вырастет.
Медоед-киборг
К финальному релизу, рассказал руководитель управления машинного интеллекта и исследований «Яндекса» Алексей Гусаков, нейросеть будет генерировать «баннеры, иллюстрации, создавать изображения для интернет-витрин и не только», но пока это не более чем источник хорошего настроения для пользователей.
Шедеврум
Smoke on the water, fire in the sky
Смотреть все изображения (10)
Бобёр пьет чай и пишет код на Макбуке
Гусь-зомби
Кот с рюкзаком на спине идет по заброшенному городу
Ктулху ест арбуз
Летняя Москва в стиле Ван Гога
Первый робот на деревне
Портрет рыжеволосой девушки с зелеными глазами
Пудель ныряет в бассеи?н, как на обложке альбома Nevermind
Сказочныи? город в небе
Смотреть все
изображения (10)
Сейчас в приложениях «Шедеврум» можно преимущественно лишь знакомиться с результатами работы нейросети, отмечая понравившиеся изображения в ленте. Собственное описание для генерации изображения пока можно предложить в формате заявки и дождаться её подтверждения. Но в перспективе это ограничение планируют снять, и отправлять свои описания смогут все зарегистрированные пользователи.
Источник: 3DNews