Google разработала алгоритм перевода устной речи Translatotron, способный сохранять интонацию и голос говорящего Статьи редакции

Нейросеть переводит речь напрямую, пропуская этап конвертации аудио в текст.

Google разработала алгоритм Translatotron, который напрямую переводит устную речь на разные языки, минуя конвертацию в текст. Система также умеет сохранять голос и интонацию пользователя. Об этом компания сообщила в своём блоге.

В существующих переводчиках, включая Google Translate, при устном переводе звук сначала конвертируется в текст, а потом обратно в аудио. Основное отличие Translatotron в том, что он пропускает этот этап и работает напрямую со звуком — система создаёт «слепок» исходной речи и преобразует её.

Схема работы Translatotron Google

Подобный алгоритм позволяет увеличить скорость перевода, сократить число ошибок в распознавании речи и при переводе слов, которые не нужно переводить, например, имён. Специалисты Google отмечают, что Translatotron — первая система прямого перевода без конвертации в текст.

Кроме того, алгоритм научили сохранить интонации и паузы говорящего, чтобы сделать звучание перевода более естественным. Нейросеть также может сохранять исходный голос, но эта система обучена на меньшем количестве данных, поэтому варианты перевода получаются немного разными. Посмотреть примеры переводов алгоритма можно в репозитории Google на GitHub.

{ "author_name": "Даша Лейзаренко", "author_type": "editor", "tags": ["\u043d\u043e\u0432\u043e\u0441\u0442\u0438","\u043d\u0435\u0439\u0440\u043e\u0441\u0435\u0442\u0438","google"], "comments": 12, "likes": 30, "favorites": 14, "is_advertisement": false, "subsite_label": "tech", "id": 97408, "is_wide": false, "is_ugc": false, "date": "Thu, 16 May 2019 14:33:47 +0300", "is_special": false }
0
12 комментариев
Популярные
По порядку
Написать комментарий...
–15

Труп в конвульсиях. Пацики давно проиграли конкуренцию яндексу.

Ответить

Излишний историк

Eldar
9

Комментарий удален по просьбе пользователя

Ответить

Излишний историк

Излишний
5

Комментарий удален по просьбе пользователя

Ответить

Излишний историк

Излишний
3

Комментарий удален по просьбе пользователя

Ответить
13

Вот ты и нашёл моего твинка.

Ответить
2

Ну яндекс хотя бы переводит не только через английский, в этом плане в ряде случаев намного выигрышнее получается

Ответить
0

Щас ребята пояснят, что лучше гугл, чем товарищ майор будет читать их переводы.

Ответить

Излишний историк

Eldar
0

Комментарий удален по просьбе пользователя

Ответить
0

Комментарий удален по просьбе пользователя

Ответить
1

а где это затестить можно?

Ответить
0

Вернули мне мой две тысячи седьмой

Ответить
Обсуждаемое
Новости
Экс-директора ФБК Ивана Жданова объявили в розыск
Через два дня после признания ФБК экстремистской организацией.
Москва
Собянин объявил «нерабочие дни» в Москве с 12 по 20 июня из-за ухудшения ситуации с коронавирусом
Работникам обещают сохранить зарплату.
Новости
Журналист Майкл Наки уехал из России из-за «политической ситуации в стране»
Блогер и радиоведущий пообещал вернуться, когда «в Россию вернутся конституционные права».
Популярное за три дня
Животные
Наука
Пустоты не существует: что находится между атомами и внутри них с точки зрения современной физики
Квантовая механика против философской идеи абсолютной пустоты.
Петербург
В Петербурге уличные художники нарисовали на будке поп-ит, но его пришлось заменить на чёрно-белые «Скрепы»
Вторую работу в итоге тоже закрасили.
Комментарии
null