Нейросеть Nvidia создает картины по грубым зарисовкам

Нейросеть Nvidia создает картины по грубым зарисовкам

26.03.2019      20325

Nvidia разработала технологию, превращающую схематические наброски в фотореалистичные изображения. Она упростит работу художников и аниматоров.

Будущее графики

Компания-производитель видеокарт Nvidia презентовала на GPU Technology Conference 2019 нейросеть GauGAN, названную так в честь художника Поля Гогена. Она превращает грубый нарисованный набросок в полноценное изображение. Пользователь отмечает контуры необходимых объектов в специальном графическом редакторе и получает реалистичную картину. 

Пока система умеет генерировать только пейзажи. Для обучения нейросети инженеры Nvidia использовали более миллиона изображений Flickr. Благодаря этому программа автоматически дорисовывает необходимые детали: отражения деревьев в воде, погодные условия и т.д.

В дальнейшем приложение научится работать с городской архитектурой и портретами людей. В свободном доступе программы пока нет, и планов по ее релизу Nvidia также не озвучила. Однако на презентации компании опробовать GauGAN мог любой желающий.

 

Принцип работы нейросети

 

Умный редактор

Вместе с нейросетью Nvidia представила сам графический редактор, где нейросеть по грубым наброскам создает реалистичные изображения. Пользоваться инструментом не сложнее, чем стандартным Paint. В нем есть три инструмента: заливка, перо и карандаш. Цвета и текстуры художник выбирает на палитре. 

GauGAN обрабатывает схематичные рисунки в режиме реального времени. Для этого требуется всего несколько секунд.

Как пользоваться

Чтобы начать генерацию изображения, достаточно нарисовать замкнутую линию, напоминающую необходимый объект, и залить ее похожим цветом. Например, если необходимо добавить на картинку озеро, нужно изобразить овал с неровными краями и покрасить его в синий цвет. Таким же образом создаются скалы, облака, леса и прочие детали пейзажа.

 

Пример работы нейросети

 

В редакторе можно «помочь» программе, указав желаемое время года или суток. Редактор добавит в итоговую картинку особенности, увеличивающие сходство с фото: например, для зимнего арта небо получится серым и мрачным, а на деревьях не будет генерироваться листва.

Поясняя принцип работы GauGAN, разработчики сравнивают ее с «умной» раскраской. По замыслу создателей нейросети, наиболее полезной она станет для художников, архитекторов, ландшафтных дизайнеров и других специалистов, которым важно быстро делать наброски изображений.

Главный недостаток программы – на некоторых изображениях заметны границы между объектами. Разработчики обещают в будущих версиях избавиться от этого эффекта.



Источник: https://infostart.ru/journal/news/tekhnologii/neyroset-nvidia-sozdaet-kartiny-po-grubym-zarisovkam_1028468/
Автор:
Аналитик


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. s_vidyakin 26.03.19 12:11 Сейчас в теме
В дальнейшем приложение научится работать с городской архитектурой и портретами людей

Так, значит можно будет создавать кино просто накидав фабулу на полстранички - про генерацию сценариев еще в прошлом году была новость, как ИИ снял фильм, проанализировав структуру существующих.
Будут искуственные пейзажи, здания и люди - вложил текст, подождал день рендеринга и готово.
9. Darklight 29 26.03.19 15:49 Сейчас в теме
(1)Вероятно когда-нибудь такое будет - здесь нет ничего невозможного! Но пока на выходе - унылое гав...
2. пользователь 26.03.19 12:13
Сообщение было скрыто модератором.
...
3. zhuntovda 1 26.03.19 12:52 Сейчас в теме
Круто, очень круто. Серьезная работа!
4. VmvLer 26.03.19 13:10 Сейчас в теме
это станет востребовано уже используется в масштабных игровых проектах.

Каким бы не были красивыми прорисовки локаций в виртуальных вселенных, но прям бесит
когда сел пошпилить и где-то встрял. Ну че, лезешь на ютуб и слышишь там шепелявым фальцетом
рецеп прохождения локации - после этого пропадает эффект уникальности и интерес к игре.

И вот когда с помощью данной технологии виртуальные миры станут по настоящему уникальны и
будут генерироваться для каждого пользователя персонально - вот тогда можно будет рассчитывать
только на себя. Это будет совершенно новый вид бизнеса без ...шепелявого фальцета.
Затем подтянутся тв и дополненная реальность.
8. Darklight 29 26.03.19 15:48 Сейчас в теме
(4)Да - для каждого пользователя сгенерируют его персональную судьбу - но не факт что она приведёт главному финалу и тем более к хэпиэнду, и вообще не факт что будет суждено продвинутться дальше "третьей локации второго уровня" - такова она природа случайности - кому-то даёт флешрояль, а у кого-то одни шестёрки на руках (ну не самый плохой вариант кстати).
Ziggurat; +1 Ответить
5. user856012 13 26.03.19 13:30 Сейчас в теме
Интересно, а если нейросети эскиз денежной купюры предъявить - прорисует?

Или, как в классике: "Это все от таланта зависит. Вот у меня есть друг, тоже ученый. У него три класса образования, а он за полчаса десятку так нарисует - от настоящей не отличишь"
6. s_vidyakin 26.03.19 13:48 Сейчас в теме
Затем подтянутся тв и дополненная реальность.
И здравствуй киберпанк!
7. Darklight 29 26.03.19 15:43 Сейчас в теме
Почему меня это не впечатляет?

Во-первых, это не картины - а фотографии!

Во-вторых, это больше похоже на продвинутый фотоморфинг по цветной маске, чем на рисование. Бесспорно - как плагин для фотошопа - очень не плохо. Но что же он делает реально то? С виду просто подыскивает подходящие объекты в своей БД фотографий и морфит их на нарисованный контур.

В общем, вроде ещё не первое апреля, а уже смеяться над такой разработкой хочется! Может это вообще всё постановочный фейк - всё заранее уже подобрано - для показухи нужно просто более менее аккуратно очертить границы - и готовые изображения в них будут вписаны!

ну, или я прост не понимаю все сложности и крутости данного революционного метода в живописи!
Оставьте свое сообщение

См. также

«Сбер» начнет использовать российские TLS-сертификаты для платежного шлюза

Новость Безопасность ИТ-новость Минцифры

Банк запланировал переход на сертификаты, выпущенные Национальным удостоверяющим центром (НУЦ) Минцифры, на 30 января 2023 года. Клиентам необходимо добавить на свои серверы корневой сертификат ведомства.

сегодня в 09:45    1083    VKuser24342747    0       

Минцифры подготовило правила отказа от передачи биометрических данных

Новость ИТ-новость Минцифры

Гражданин имеет право отказаться от сбора и распространения своих биометрических данных. Отказ можно оформить в МФЦ только при личном присутствии.

24.01.2023    979    VKuser24342747    0       

Банки смогут получить право на передоверие полномочий по электронной подписи

Новость ИТ-новость Цифровая подпись Цифровая экономика

Комитет Госдумы рекомендует принять соответствующий законопроект. Документ позволит компаниям финансового сектора использовать электронную подпись наравне с другими организациями.

20.01.2023    866    VKuser24342747    0       

«ВКонтакте» начал поддерживать получение уведомлений от Госуслуг

Новость Госуслуги ИТ-новость Мессенджеры Налоги

Оповещения с Единого портала госуслуг будут отображаться в Вконтакте и приложении «VK Мессенджер». Кроме того, стала доступна оплата штрафов ГИБДД прямо в VK.

19.01.2023    981    VKuser24342747    0       

Минцифры подготовило правила аккредитации госорганов на владение информсистемами для биометрии

Новость Законодательство ИТ-новость Минцифры

Проект постановления содержит требования к Цетробанку и госорганам, а также к сторонним организациям, которые будут привлекаться ведомствами в качестве операторов. Требования согласованы с ФСБ.

19.01.2023    900    VKuser24342747    0       

Утвержден профстандарт специалиста по информационной безопасности

Новость Безопасность ИТ-новость

Новый профстандарт вступит в силу 1 сентября 2023 года. А пока у работодателей в кредитно-финансовой сфере есть время проанализировать трудовой функционал специалистов по ИБ и при необходимости уточнить его.

17.01.2023    1554    user1816563    0       

Национальная система пространственных данных начала работу в России

Новость ИТ-новость Цифровая экономика

Пилотный проект по запуску цифровой платформы стартовал в четырех регионах РФ. При помощи системы можно получать актуальные данные о земле и недвижимости, пользоваться электронными сервисами.

12.01.2023    1744    VKuser24342747    0       

Госдума рассмотрит законопроект о цифровом рубле

Новость Законодательство ИТ-новость Цифровая экономика

Документ определяет выпуск и обращение цифрового рубля на территории России, назначает оператора нового платежного средства и его полномочия и обязанности по сохранности денег пользователей.

11.01.2023    3514    VKuser24342747    2       

Оператором Единой биометрической системы стал «Центр Биометрических Технологий»

Новость ИТ-новость

Ранее за работу платформы отвечал «Ростелеком». На «Центр Биометрических Технологий» возложены задачи по развитию в России цифровых технологий идентификации и аутентификации, в том числе на основе биометрических персональных данных.

22.12.2022    2410    VKuser24342747    2       

GitHub бесплатно проверит репозитории на наличие секретных токенов

Новость GitHub Безопасность ИТ-новость

ИТ-хостинг запустил систему сканирования общедоступных репозиториев, чтобы предотвратить случайное раскрытие конфиденциальной информации, такой как учетные данные и токены аутентификации.

22.12.2022    1760    VKuser24342747    1       

GitHub к концу 2023 года введет обязательную двухфакторную аутентификацию

Новость GitHub Безопасность ИТ-новость

Веб-хостинг потребует от всех пользователей, загружающих код, включить двухфакторную аутентификацию (2FA) для дополнительной защиты своих аккаунтов.

21.12.2022    2058    VKuser24342747    0       

Госдума рассмотрит законопроект о провайдере для госсайтов

Новость Государственные, бюджетные структуры Законодательство ИТ-новость

Документ предусматривает запрет на размещение государственных информационных ресурсов на хостингах, не включенных в специальный реестр. Сейчас около 20% ресурсов госорганов размещены на иностранных площадках.

20.12.2022    1669    VKuser24342747    1       

«Яндекс» открыл доступ к фреймворку Yatagan для сборки Android-приложений

Новость ИТ-новость Яндекс Разработка

Инструмент свободно распространяется через GitHub. Перед публикацией в открытом доступе фреймворк долгое время применялся во внутренних проектах компании. Решение основано на API Dagger.

16.12.2022    2480    VKuser24342747    1       

В России появится национальная издательская система вместо иностранных аналогов

Новость Импортозамещение ИТ-новость

Программный комплекс будет создан на базе существующего отечественного решения Axiocat. Сейчас это приложение не внесено в Единый реестр российского ПО, хотя применяется некоторыми компаниями.

15.12.2022    1711    VKuser24342747    0       

Google рассказала о проблемах и преимуществах поддержки разработки на Rust в Android 13

Новость Google ИТ-новость Языки программирования

По итогам внедрения поддержки разработки на Rust снизилось число уязвимостей, связанных с управлением памятью. Инженеры считают, что основное внимание нужно уделить написанию нового кода, а не переписыванию старого.

14.12.2022    1797    VKuser24342747    0       

Банки обяжут принимать оплату по картам «Мир» с QR-кодом в смартфоне

Новость Банки ИТ-новость

Оператор платежной системы «Мир» разослал российским банкам документ с требованием обеспечить прием платежей по новой технологии. Первый этап внедрения завершится в апреле 2023 года.

14.12.2022    1998    VKuser24342747    1       

Госдума рассмотрит законопроект о создании Национального удостоверяющего центра

Новость Законодательство Интернет ИТ-новость

Информационная система позволит российским сайтам получать сертификаты безопасности без участия иностранных организаций. Для их выдачи будет применяться отечественная криптография.

09.12.2022    1839    VKuser24342747    0       

Госдума планирует отложить срок обязательного перехода на машиночитаемые доверенности

Новость Законодательство ИТ-новость

Госдума в первом чтении одобрила законопроект, который продлевает переходный период для машиночитаемых доверенностей. Еще полгода организации смогут не применять МЧД при использовании электронных подписей.

08.12.2022    1921    VKuser24342747    0       

GitHub опубликовал статистику по языкам и проектам за 2022 год

Новость ИТ-новость Языки программирования Разработка

В статистическом отчете репозитория названы самые популярные языки программирования среди пользователей платформы, а также данные об активности аудитории сервиса.

01.12.2022    2307    VKuser24342747    11       

Инспекторы смогут проводить дистанционные проверки через смартфон

Новость ИТ-новость Мобильные приложения

Минэкономразвития представило мобильное приложение, которое позволит осуществлять надзорные мероприятия бизнеса без посещения офиса. Программа работает через Госуслуги.

28.11.2022    2274    VKuser24342747    0       

«Яндекс» представил бесплатный сервис для быстрого поиска в облаке

Новость ИТ-новость Облачные технологии

Сервис Managed Service for OpenSearch от платформы Yandex Cloud предназначен для оптимизации поисковых систем и проверки стабильности и безопасности работы приложений. Услуга доступа в режиме Public Preview.

24.11.2022    3027    VKuser24342747    1       

В декабре начнут действовать новые правила регистрации доменов .RU и .РФ

Новость ИТ-новость Роскомнадзор

С 12 декабря Роскомнадзор получит право прекращать делегирование домена, если он оформлен нелегально, или на сайте содержится запрещенная в России информация.

23.11.2022    2213    VKuser24342747    1       

Stack Overflow запустил проект для оффлайн-доступа к форуму

Новость ИТ-новость Разработка

Проект под названием Overflow Offline позволяет скачать актуальную версию архива вопросов и ответов по разработке ПО. По объему данных база форума уступает только «Википедии».

02.11.2022    2085    VKuser24342747    1       

Минцифры запустило магазин российского ПО из реестра ИТ-решений

Новость Импортозамещение ИТ-новость

Маркетплейс «Руссофт» стал доступен для всех пользователей. С его помощью можно подобрать программы от отечественных разработчиков для решения корпоративных задач бизнеса.

21.10.2022    2469    VKuser24342747    4       

В ноябре начнется создание российского государственного аналога GitHub

Новость ИТ-новость

Правительство озвучило дату запуска эксперимента по разработке отечественного репозитория ПО. Исходники программ, в том числе разработанных для госорганов, будут публиковаться в нем под открытой лицензией.

19.10.2022    3367    VKuser24342747    14