Рубрика развивается при поддержке
Advertisement

С помощью дипфейков дублирование фильмов сделали «полноценным» — будто актёры изначально говорят на нужных языках Статьи редакции

Нейросеть подстраивает мимику актёра под дублированную речь.

Изображение компании Flawless

Британская компания Flawless выпустила программный пакет TrueSync, который с помощью нейросетей синтезирует движения губ и лицевых мышц актёров так, как если бы они говорили на другом языке. Это позволяет добиться иллюзии того, что актёры в фильме произносят реплики из дубляжа, а не из оригинальной звуковой дорожки.

По словам представителей компании, их программный пакет, использующий глубокое машинное обучение, сохраняет все нюансы и эмоции исходного материала. TrueSync замещает лицо актёра дипфейком с учётом оригинальной мимики, чтобы не потерять тонкости игры актёра.

Дипфейки уже использовали в искусстве для «воскрешения» умерших музыкантов, и вот теперь их применение добралось до кинематографа. Технология неидеальна — в некоторых моментах видны недочёты работы дипфейка, которые могут создавать эффект «зловещей долины». Также возникает вопрос, насколько фильм с таким «визуальным дубляжом» близок к тому, что хотел выразить режиссёр с актёрами.

0
72 комментария
Популярные
По порядку
Написать комментарий...
Террористический месяц

Комментарий удален по просьбе пользователя ред.

96

Надо было какой-нибудь монолог из Red Alert 2, я бы слег

41

я уже от твоего коммента погиб, не надо еще видосом добивать))

5

Энд ХанРед Энд ФоРти чего-то там… До сих пор в голове сидит этот акцент…

0

Откуда? Или сами сделали?

2
Террористический месяц

Комментарий удален по просьбе пользователя

1
Террористический месяц

Вот вам тест дата, дублируйте с мимикой

34

Блин как же реалистично

3

Шикардос!

1

круто

1

какой-то странный Юэн Макгрегор\

0

ВСЕХ..БЛЯТ..НАХ.../должно сработать

0

Выглядит нереалистично от слова совсем

27

Это еще раз подтверждает что том круз в тиктоке реальный. А то что дипфейк просто легенда

4
Террористический месяц

С помощью дикпиков

21

с ними работают только переводы гоблина

7

Что об этом думают сами актеры - вот это важно

1

На протяжении всей истории Голливуда и студийного кинематографа мнение актеров не имело значения.

45

Раньше да, а теперь попробуй заткнуть этих недовольных

5

Помнишь бучу насчет искусственного омоложения актеров("Ирландец")? Все же успокоились уже. Технологии нельзя остановить, потому что они увеличивают прибыль студий, которые и являются двигателем. А так как в США кино делается на частные деньги, там и через государство не добьешься особо регуляций и ограничений. 

4

Короч, с Ирландцем актеры дали согласие, не понимая как всрато выйдет - подписи стоят. Тут будет аналогичная ситуация, кто то согласится, кто то нет, шушеру спрашивать не станут. А вот какой получится результат - уже вопрос. Я все сказал

2

Вот бы нейросеть перерисовала ту сцену "избиения".... Или хотя бы удалила её из моей головы

0

Все идет к еще большему разделению на условный "высокий театр" и "попкорн блокбастеры". Не хочешь чтоб студия делала с твоим лицом и жопой все для максимизации прибыли ? Пиздуй в театр!
.
Это история аналогичная лягушке в кипятке. Они ведь промолчали когда вокруг повесили хромокей а теперь хули рыпаться.

0

Мнение актёров выражают профсоюзы, и они вполне влиятельны

2

А ЧТО ДУМАЕТ ВЕРНИК?

9

Я думал Крутой

1

Верник тоже крутой

5
Террористический месяц
1

Пись-Кать?

1

ах ты ж содомит))) где ты откопал эту реликвию?)

1

Стоп, разве создатели этого дерьма не видят сами, что это не смотрибельно от слова совсем? Нижняя часть лица просто съебала от верхней в Воронеж и живёт отдельной жизнью с детьми и ипотекой

13
Террористический месяц

Любая технология вначале говно, а потом развивается и достигает лучших результатов

5

Сука, как же бесит эта фраза тупая «от слова совсем»! Чтоб автору этой херни пусто было

1

Ты чего такой злой? Доброе нужно к людям быть!

0
Террористический месяц

Комментарий удален по просьбе пользователя

4
Террористический месяц

кино убивает дубляж

15
Террористический месяц

убийство дублирует кино

2
Террористический месяц

Комментарий удален по просьбе пользователя

11

Ну нормально, но когда прислать начал, то нижняя часть лица прямо отдельно от остального лица как будто. 

2

В коментах перепись душнил ноющих что дубляж для быдла

8

Пока не так и много душнил

0

Просто напомню что существует bad lip reading и эти ваши нейросети не могут быть круче профессионалов дубляжа.

6

Столько трудов ради людей, неспособных прочитать субтитры. 

–6

То есть ради большинства.

1

Смотря где. В России да. В США зарубежное кино большинство смотрит как раз с субтитрами.

1
Террористический месяц

А много зарубежного кино им вообще приходится смотреть? Дублируют то у нас чаще всего как раз с английского.

0

Очевидно, что меньше, чем у нас. Однако это не меняет сути, американцы почему-то спокойно читают субтитры и не парятся, но в некоторых других странах людям прям очень тяжело.
Те же "Паразиты" в 2019м были одним из самых популярных фильмов и у них не было никакого дубляжа.

1

Комментарий удален по просьбе пользователя

0

лесной болван

3
Террористический месяц

беги лес, которым управляют, беги!

1
Террористический месяц

Получи велосипеды! Давайте получим его? Давай! Выглядит эффективно! Мы собираемся получить его!

0
Террористический месяц

вау додумались до приема из видеоигр когда движок анимации подстраивается под звук
теперь как это работало на практике в ведьмаке 3

2

это работает только для процедурно генерируемой мимики. Если снимать ее с помощью motion capture, то не выйдет. Вот как раз похожая технология может быть применима и для игр. И делать она это может даже качественнее, чем в фильмах.

3

Ещё на Source такое было

3
Террористический месяц

мимики, чтобы не потерять тонкости игры актёра.

Ну а врать так зачем? Как это реализуется? На мимике конкретного актера нейросеть училась? 

1

 Ну а врать так зачем?

Иначе корову не продать

4

Комментарий удален по просьбе пользователя

2

Том Хэнкс говорящий по-японски, это, конечно, сильно.

2

Штукенция полезная, наконец перестанет раздражать, когда они губами в перевод не попадают. 

1

штош, теперь авторы синхронного перевода останутся без работы

0

Те кто на первом курсе Щуки, у меня для вас плохие новости...

0

Комментарий удален по просьбе пользователя

0

Страшно на самом деле, к каким негативным вещам может привести эта технология.

0
Террористический месяц

Да, именно для этого используют дипфейки, А НЕ ДЛЯ ТОГО, ЧТОБЫ НАРУШАТЬ ПРАВА ГРАЖДАН РФ ВЕЗДЕ И ВСЮДУ.

0

Комментарий удален по просьбе пользователя ред.

0

Блин, надо переделать так Властелин колец, в переводе Гоблина! А то иногда озвучка не попадает)))

0
Читать все 72 комментария
null