NVIDIA представила обновлённую нейросеть GauGAN2 — она рисует фотореалистичные пейзажи в высоком разрешении
ИИ создаёт футуристические пейзажи и рисунки на основе набросков и текстовых описаний.
Интерфейс Nvidia Canvas Скриншот Nvidia
4 января NVIDIA выпустила обновление для программы NVIDIA Canvas — графического редактора, создающего с помощью ИИ реалистичные пейзажи на основе схематичных рисунков. Об этом сказано на сайте компании.
С новым обновлением в программу добавили ИИ GauGAN2, а разрешение получаемых изображений увеличили в четыре раза — с 256x256 до 1024x1024 пикселей. В редакторе также появились пять новых кистей для рисования, имитирующих реальные текстуры: солому, цветы, ил, грязь и кустарники.
Генеративно-состязательную нейросеть GauGAN2, встроенную в новую версию приложения, представили в ноябре 2021 года. Она умеет создавать пейзажи не только на основе рисунков, но также по текстовым описаниям.
Бета-версия GauGAN2 создала этот пейзаж по запросу «скалистый выступ с видом на ручей в лесу» PC Gamer
GauGAN2 обучена на 10 миллионах высококачественных пейзажных изображений с использованием NVIDIA Selene — этот суперкомпьютер занимает шестую позицию в мировом рейтинге, опубликованном в ноябре 2021 года.
Нейросеть может оказаться полезной для создания концепт-артов, поскольку умеет генерировать не только пейзажи, но также абстрактные миры: например пейзажи с двумя солнцами, как на пустынной планете Татуин из «Звёздных войн», писало издание Digital Photography Review.
Планета Татуин из игры Star Wars: Battlefront Скриншот Playground.ru
Попробовать алгоритм можно на сайте разработчиков. В январе редактор издания PC Gamer Кэти Уикенс протестировала новый ИИ. Сгенерировать рисунок без артефактов, похожий на реальную фотографию, она смогла «после нескольких попыток». Уикенс выяснила, что GauGAN2 неверно определяет расстояния до объектов на рисунках.
Слева фотография, справа — её копия, обработанная Nvidia Canvas PC Gamer
Обратите внимание на деревья на вершине утёса — они должны быть далеко. ИИ не смог их правильно масштабировать независимо от того, насколько малы точки [на исходном рисунке].
Возможно, GauGAN2 не лучший способ скопировать реальные изображения, нарисовав их заново.
По словам Уикенс, более реалистичных текстур удалось добиться, используя крупные мазки на скетче.
Скетч и пейзаж, получившийся в результате тестирования Nvidia Canvas Фото PC Magazine
Программу Canvas для Windows можно скачать с сайта Nvidia. Она, в отличие от веб-демо GauGAN2, работает только на компьютерах с Nvidia RTX, поскольку использует тензорные ядра этих видеокарт.
Пользователи соцсетей начали экспериментировать с бесплатным приложением. Получившиеся пейзажи и футуристические картины они выкладывают в инстаграме.
#новости #nvidia #нейросети #фотогафии