NVIDIA GauGAN2 превращает предложения в реалистичные фотографии

Программа на базе искусственного интеллекта GauGAN2 от NVIDIA может использовать простые письменные фразы для создания подходящего фотореалистичного изображения. Алгоритм глубокого обучения способен создавать различные сцены всего за три - четыре слова.

image_13

Сгенерированное ИИ изображение, созданное с помощью фразы “мирное озеро, окруженное высокими деревьями в туманный день”.

GauGAN-это программа на базе искусственного интеллекта, выпущенная в 2019 году, которая использовалась для превращения грубых набросков в фотореалистичные шедевры, технология, которая в конечном итоге была включена в приложение NVIDIA Canvas в начале этого года. На этот раз NVIDIA продвинула искусственный интеллект еще дальше, и теперь для создания “фотографии " программе требуется только краткое описание.

Как говорит NVIDIA, алгорит на основе так называемых генеративных состязательных сетей, лежащий в основе первой версии GauGAN, позволяет любому создавать красивые сцены, а сейчас это стало даже проще, чем когда-либо. Пользователи могут просто ввести фразу, например, “закат на пляже”, а искусственный интеллект сгенерирует соотвествующую сцену.  По мере добавления слов, например, “закат на скалистом пляже” или заменив “закат” на “день” или “дождливый день”, изображение в режиме реального времени будет меняться соотвествующим образом.  

«Одним нажатием кнопки пользователи могут сгенерировать карту сегментации - высокоуровневую схему, показывающую расположение объектов в сцене, - объясняет NVIDIA. - Оттуда они могут переключиться на рисование, настраивая сцену с помощью грубых обрывков, таких как небо, дерево, скала и река, позволяя умной кисти включать это всё в создаваемое изображение».

image_14

Сгенерированное искусственным интеллектом изображение, созданное с помощью фразы “тропический остров с видом на пляж с белым песком ”.

image_16

Сгенерированное искусственным интеллектом изображение, созданное с помощью фразы “бесконечные высокие горы в солнечный день”.

Кроме того, GauGan2 объединяет в себе отображение сегментации, рисование и генерацию текста в одной модели, что, по словам NVIDA, делает эту программу мощным инструментом, позволяющим создавать фотореалистичное искусство с помощью сочетания слов и рисунков. Цель состоит в том, чтобы быстрее и проще превратить видение художника в высококачественное изображение, сгенерированное ИИ. NVIDIA говорит, что по сравнению с другими современными моделями, предназначенными специально для приложений преобразования текста в изображение, GauGAN2 генерирует более разнообразный и более качественный набор изображений.

Таким образом, вместо того, чтобы рисовать каждый элемент воображаемой сцены, пользователи могут ввести краткую фразу, чтобы быстро сгенерировать ключевые объекты и тему изображения, например, заснеженный горный хребет. Затем эту отправную точку можно дополнить с помощью эскизов, чтобы сделать конкретную гору выше или добавить пару деревьев на переднем плане или облака в небе.

Хотя создание реалистичного изображения, вероятно, является наиболее впечатляющим, GauGAN2 не ограничивается только этим. Художники также могут использовать новую версию программы для изображения потусторонних и вымышленных пейзажей. NVIDIA демонстрирует сцену, которая воссоздает что-то похожее на несуществующую планету Татуин из "Звездных войн", где искусственный интеллект изначально создает сцену пустыни, но затем добавляет второе солнце.

«Это итеративный процесс, когда каждое слово, которое пользователь вводит в текстовое поле, добавляет больше деталей к изображению, создаваемому искусственным интеллектом».

Функцию преобразования текста в изображение можно протестировать на странице NVIDIA AI DEMOS >>, где любой желающий может попробовать создать свои сцены с текстовыми подсказками и дополнительно настроить их с помощью быстрых эскизов для получения более точных результатов.

Источник: PetaPixel

5 Кадров на Mamiya 6 MF

5 Кадров на Mamiya 6 MF

Блогвчера
Несколько 35-мм камер проявили во мне интерес к фотоплёнке, и мне не терпелось попробовать средний ф...
Сосновые шишки – идеальный органайзер для карт SD

Сосновые шишки – идеальный органайзер для карт SD

Блог6 ч. назад
Каждый год сосна рядом с нашим домом усеивает замелю идеальными по форме шишками, я часто собираю их...
Как создавать оригинальные идеи

Как создавать оригинальные идеи

Блог1 год назад
Оригинальную идею придумать сложно. Это признают все, даже маститые фотографы. Дорогая техника, вирт...
Так ли важно для фотографа владеть новейшим оборудованием?

Так ли важно для фотографа владеть новейшим оборудованием?

Блог5 дн. назад
Фотография — это технически нагруженная работа. Основные производители камер, тратят много средств и...
5 кадров на плёнку Ferrania P30

5 кадров на плёнку Ferrania P30

Блог1 год назад
Некоторое время назад я получил электронное письмо от магазина Film Photography Project, в котором м...
Соня, Самсон и Мама Тесла.

Соня, Самсон и Мама Тесла.

Блог6 лет назад
Плюшево-песчаный медвежонок слева - это Соня. А справа - Самсон. Они сеголетки, но когда я увидел их...
Я | ФОТОГРАФ. Эдуард Кутыгин

Я | ФОТОГРАФ. Эдуард Кутыгин

Блог6 лет назад
Прощаемся с зимой и ее удивительными красками — предлагаем вам полюбоваться фантастическими снимками...
Правила жизни. Евгений Жмак

Правила жизни. Евгений Жмак

Блог6 лет назад
Представляем вам изумительные пейзажи Евгения Жмака из самых разных уголков планеты! Фотограф расска...
На глубине Байкала с Виктором Лягушкиным

На глубине Байкала с Виктором Лягушкиным

Блог6 лет назад
Компания Nikon и телеканал Моя планета представляют новый головокружительный проект. Десять известны...
МЕДВЕЖИЙ РАЙ - ОСТРОВ САМАНГ НА КУРИЛЬСКОМ ОЗЕРЕ

МЕДВЕЖИЙ РАЙ - ОСТРОВ САМАНГ НА КУРИЛЬСКОМ ОЗЕРЕ

Блог6 лет назад
Остров Саманг - сердце Курильского озера. Интересен факт, что этот остров является "родильным д...
Я | ФОТОГРАФ. Светлана Казина

Я | ФОТОГРАФ. Светлана Казина

Блог6 лет назад
Величественная красота природы Горного Алтая в кадрах Светланы Казиной. Нравятся ли вам фото? Подели...
Сказки древнего Ровиня

Сказки древнего Ровиня

Блог3 года назад
Во второй половине июня я вернулся из небольшого путешествия по Хорватии, где я снимал свадьбу. Удал...
Булат Окуджава

Булат Окуджава

Блог5 лет назад
А ведь Булат Шалвович просил... Нет, не просил, конечно. Он пел в форме нежного повеления о то...
Z Creator Nikon Елена Чернышова: от мечты до реализации — мой путь в фотографи

Z Creator Nikon Елена Чернышова: от мечты до реализации — мой путь в фотографи

Блог2 мес. назад
Однажды документальный фотограф и Z Creator Nikon Елена Чернышова бросила работу и отправилась в тре...
Как превратить плёночную камеру в цифровую

Как превратить плёночную камеру в цифровую

Блог1 год назад
Видеоблогер [befinitiv] опубликовал на своём YouTube-канале видео, в котором показал, как ему удалос...
NVIDIA GauGAN2 превращает предложения в реалистичные фотографии
журнал ФотоТехника

Комментарии

Отправить