Нейросеть научилась рисовать иллюстрации по главным словам

Новости. » » Нейросеть научилась рисовать иллюстрации по главным словам

ИИ-алгоритм от Microsoft сумел нарисовать птичку, основываясь только на текстовом описании.

Так, система создала изображение с нуля, не выбирая подходящее из базы данных. Однако что если попробовать поставить ему обратную задачу — нарисовать картину, исходя из текстовых описаний? Так, первым его заданием была птица, которую он сумел нарисовать по требованию исследователей — они попросили его показать «птичку с чёрными крыльями и коротким клювом», после этого ИИ приступил к работе, результат которой можно наблюдать выше.

Разработчикам, таким образом, удалось показать эффективность нового алгоритма создания изображений на основе описания и отдельно — эффективность добавления в нейросеть «внимательной» составляющей. На основе такого алгоритма создаются программы, которые умеют рисовать уникальные произведения искусства, создавать трехмерные модели территории и даже превращать наброски в фотореалистичные портреты.

Создатели отмечают, что такой птицы может совсем не жить, ведь она — только осуществление довольно абстрактной просьбы, адресованной к ИИ, тем как минимум результаты его работы впечатляют, хоть пока и не идеальны.

Невзирая на то, что на данный момент технология не безупречна, трудно переоценить воздействие, которое она может оказать в будущем.

В Microsoft считают, что такая технология вполне может стать платформой для создания анимационных фильмов по сценарию.

Стоит обозначить, что профессионалы Microsoft также проводят исследования в области компьютерного зрения и обработки естественного языка при помощи CaptionBot. Кроме того, ученые создали систему, отвечающую на вопросы, связанные с изображениями под названием SeeingAI, которая может быть полезной для слепых.

За отрисовку отвечает генеративно-состязательная сеть Attentional Generative Adversarial Network (AttnGAN). CaptionBot обучался на парах изображений и подписей, которые подсказывают, как слова соотносятся с какими фотоснимками.

Кроме этого, ученые создали математическое представление человеческого внимания, которое мы используем, когда рисуем картины, основываясь на сложных описаниях. Ее, кстати, можно использовать для слепых и слабовидящих людей.

Нейросеть от Microsoft научили рисовать картины используя воображение

Поделиться с друзьями!

<<
>>



Интересные новости и статьи:


Последние публикации: