Рубрика развивается при поддержке HP logo

В Facebook разработали нейросеть Vid2Play, которая вырезает людей из видео и позволяет ими управлять Материал редакции

Можно поиграть за человека из любого ролика.

В закладки

Исследователи из лаборатории искусственного интеллекта Facebook создали нейросеть Vid2Play. Она вырезает людей из роликов и превращает в играбельных персонажей, которыми можно управлять.

Алгоритм генерирует новые кадры с героем ролика, при этом видео может иметь произвольный фон, а система эффективно отображает человека в движении.

Для этого команда использовала две нейросети: Pose2Pose помечала позу человека и вырезала движения, а Pose2Frame — размещала персонажа и связанное с ним окружение на новый «слой». В итоге героя можно контролировать любым простейшим управлением, например клавиатурой или джойстиком.

Чтобы обучить систему использовали три ролика длиной от 5 до 8 минут. Один был посвящён игре в теннис на улице, второй человеку, размахивающему мечом в помещении, а третий — гулящему человеку.

Каждая нейросеть решает вычислительную проблему, которую до этого полностью не решали никогда, прокладывая путь к видеоиграм с реалистичной графикой. Кроме того, управляемые персонажи из YouTube-видео могут найти место в виртуальных мерах и дополненных реальностях.

исследователи Facebook
Добро пожаловать в техтябрь, а я — выпускающий редактор TJ. По работе писать на damir@tjournal.ru. Twitter — для коротких быстрых мнений Facebook — для работы Instagram — красивые (и не очень) фоточки из жизни
{ "author_name": "Дамир Камалетдинов", "author_type": "editor", "tags": ["\u043d\u0435\u0439\u0440\u043e\u0441\u0435\u0442\u0438","\u0438\u0438","\u0438\u0433\u0440\u044b","\u0432\u0438\u0434\u0435\u043e"], "comments": 7, "likes": 23, "favorites": 9, "is_advertisement": false, "subsite_label": "tech", "id": 103383, "is_wide": false, "is_ugc": false, "date": "Tue, 25 Jun 2019 01:48:37 +0300", "is_special": false }
Создан для будущего Узнайте больше HP Neverstop Laser HP Neverstop Laser
Промо
Киберпанк уже здесь. Что умеют протезы, экзоскелеты и другие устройства для людей с инвалидностью
Как технологии помогают людям с нарушениями здоровья.
Объявление на TJ
0
7 комментариев
Популярные
По порядку
Написать комментарий...

Силовой кавалер

3

нейросеть вырезает людей

нейросеть позволяет управлять людьми

😱

Ответить
0

Опередил. Молодцы фб-вцы.

Ответить
1

Лучше бы с интерфейсом своим разобрались...

Ответить
0

Охуенно все это. Хочу поскорей просто видеть все это глазами, контролируемую цифровую шизофрению

Ответить
0

Можно поиграть за человека из любого ролика

Можно поиграть за Джонни Синса ?

Ответить
0

Для борьбы с фейками разработан инструмент для создания фейков, джоб дан)

Ответить
Обсуждаемое
Новости
Белорусы вышли на улицы в последний день перед «народным ультиматумом». Главное
Власти уже перекрыли метро, отключили связь в Минске и начали задерживать журналистов.
Истории
Гонг, волчок и минута: как за 45 лет поменялась игра «Что? Где? Когда?»
Путь от семейной викторины до главного интеллектуального шоу с конфликтами и скандалами.
Новости
В Чебоксарах тату-мастер пожарил сосиски на Вечном огне и стал фигурантом уголовного дела о вандализме
Дело возбудили на следующий же день.
Популярное за три дня
Истории
Гонг, волчок и минута: как за 45 лет поменялась игра «Что? Где? Когда?»
Путь от семейной викторины до главного интеллектуального шоу с конфликтами и скандалами.
Новости
В МГУ нашли следы распада ракетного топлива в пробах воды с Камчатки. Раньше учёные отвергали эту версию
В пробах обнаружили два продукта распада известного компонента ракетного топлива.
Технологии
ClipDrop — приложение при помощи камеры телефона «вырезает» объекты в реальном мире и переносит их на экран компьютера
TJ проверил работу сервиса — и он неплохо справился даже с пушистыми текстурами.
null