В MIT создали инструмент для редактирования изображений «в один клик», который может не подчиняться командам человека

Можно превратить асфальт в газон или замазать лишний объект на фото, если это не противоречит физике.

В закладки
Аудио

Исследователи из MIT и IBM разработали инструмент Paint Studio, который позволяет добавлять, редактировать и удалять объекты на фотографиях одним движением. Система работает с артефактами, но выдаёт правдоподобный результат.

По словам профессора MIT Антонио Торральбы, инструмент обладает «строгой индивидуальностью» и не станет выполнять действия, если посчитает, что они не подходят для изображения.

Все приложения для рисования следуют инструкциям пользователей, но наше может решить не рисовать ничего, если человек пытается поместить объект в невозможное положение. Это инструмент для рисования со строгой индивидуальностью и он открывает окно, которое позволит понять, как генеративные состязательные нейросети представляют визуальный мир.

Антонио Торральба
профессор MIT

Демонстрацию работы приложения разместили на отдельном сайте. Инструмент пока работает только с уже загруженными изображениями низкого качества, а рисовать можно ограниченным числом «кистей»: травой, деревьями, кирпичами, куполами, небом, облаками и дверьми.

Чаще всего результат выходит реалистичным, а при противоречии с реальным миром алгоритм не меняет ничего на изображении. В некоторых случаях нейросеть оставляет артефакты на картинках — алгоритм пока не совершенен.

Для создания инструмента использовали нейросеть, состоящую из двух частей. Одна генерирует примеры реалистичных фотографий, а другая пытается найти разницу между сгенерированной картинкой и реальной. Таким образом модель совершенствуется и учится выдавать изображения определённого уровня реалистичности.

#нейросети #ии #видео

{ "author_name": "Дамир Камалетдинов", "author_type": "editor", "tags": ["\u043d\u0435\u0439\u0440\u043e\u0441\u0435\u0442\u0438","\u0438\u0438","\u0432\u0438\u0434\u0435\u043e"], "comments": 4, "likes": 21, "favorites": 10, "is_advertisement": false, "subsite_label": "tech", "id": 105007, "is_wide": false, "is_ugc": false, "date": "Fri, 05 Jul 2019 04:26:05 +0300" }
{ "id": 105007, "author_id": 50011, "diff_limit": 1000, "urls": {"diff":"\/comments\/105007\/get","add":"\/comments\/105007\/add","edit":"\/comments\/edit","remove":"\/admin\/comments\/remove","pin":"\/admin\/comments\/pin","get4edit":"\/comments\/get4edit","complain":"\/comments\/complain","load_more":"\/comments\/loading\/105007"}, "attach_limit": 2, "max_comment_text_length": 5000, "subsite_id": 214344, "last_count_and_date": null }
4 комментария

Популярные

По порядку

1

Скоро роботы зарисуют кожаных ублюдков и навсегда вычеркнут из истории

Ответить
0

давно пора, а то пишут тут некоторые разную херню

Ответить
0

так ведь мне можно :)

Ответить
0

Прямой эфир

[ { "id": 1, "label": "100%×150_Branding_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox_method": "createAdaptive", "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "ezfl" } } }, { "id": 2, "label": "1200х400", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "ezfn" } } }, { "id": 3, "label": "240х200 _ТГБ_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "i", "ps": "cndo", "p2": "fizc" } } }, { "id": 4, "label": "240х200_mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "i", "ps": "cndo", "p2": "flbq" } } }, { "id": 5, "label": "300x500_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "ezfk" } } }, { "id": 6, "disable": true, "label": "1180х250_Interpool_баннер над комментариями_Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "clmf", "p2": "ffyh" } } }, { "id": 7, "label": "Article Footer 100%_desktop_mobile", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byswn", "p2": "fjxb" } } }, { "id": 8, "label": "Fullscreen Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "fjoh" } } }, { "id": 9, "label": "Fullscreen Mobile", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "fjog" } } }, { "id": 10, "disable": true, "label": "Native Partner Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyb" } } }, { "id": 11, "disable": true, "label": "Native Partner Mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyc" } } }, { "id": 12, "label": "Кнопка в шапке", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "fdhx" } } }, { "id": 13, "label": "DM InPage Video PartnerCode", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox_method": "createAdaptive", "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "cndo", "p2": "flvn" } } }, { "id": 14, "label": "Yandex context video banner", "provider": "yandex", "yandex": { "block_id": "VI-223677-0", "render_to": "inpage_VI-223677-0-130073047", "adfox_url": "//ads.adfox.ru/228129/getCode?pp=h&ps=cndo&p2=fpjw&puid1=&puid2=&puid3=&puid4=&puid8=&puid9=&puid10=&puid21=&puid22=&puid31=&puid32=&puid33=&fmt=1&dl={REFERER}&pr=" } }, { "id": 15, "label": "Плашка на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byudv", "p2": "ftjf" } } }, { "id": 16, "label": "Кнопка в шапке мобайл", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "ccydt", "p2": "ftwx" } } }, { "id": 17, "label": "Stratum Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "fzvb" } } }, { "id": 18, "label": "Stratum Mobile", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "cndo", "p2": "fzvc" } } } ]
Узнавайте важные новости первыми
Подписаться на push-уведомления