Как работает перевод голосовых сообщений (и почему он иногда ошибается)

От команды AICO в RENVAR INC. ·

AAna · Recifeголосовое · 0:06РАСШИФРОВКА · PTAcabei de chegar no Recife.ПЕРЕВОД · RUЯ только что приехал в Ресифи.

Ты получаешь голосовое сообщение на незнакомом языке, и через мгновение слышишь его на своём. Похоже на волшебство, но на самом деле это цепочка из трёх хорошо изученных шагов. Если их знать, станет понятно и то, почему результат иногда неидеален.

Шаг 1. Речь в текст

Сначала распознавание речи превращает звук в письменный текст на языке говорящего. Этот шаг чувствителен к качеству записи. Фоновый шум, далёкий микрофон, сильный акцент или быстрый темп могут привести к ошибкам, а всё, что здесь услышано неверно, тянется дальше по цепочке.

Шаг 2. Перевод

Затем текст переводится на язык слушателя. Современный AI-перевод читает предложение целиком, а не слово за словом, и это помогает с грамматикой и порядком слов. Но идиомы, сленг, сарказм, редкие диалекты и специальные термины, а также имена, похожие на обычные слова, всё ещё даются ему трудно.

Три шага, пара секундГолосТекст · PTТекст · RUГолосраспознатьперевестиозвучитьРасшифровка остаётся рядом с сообщением, чтобы можно было проверить имена и цифры.
Как голосовое сообщение превращается в сообщение, которое можно услышать и прочитать на своём языке.

Шаг 3. Текст в речь

Наконец, переведённый текст можно озвучить синтетическим голосом на языке слушателя, чтобы слушать, а не читать. Многим при этом нравится видеть и текст, поэтому расшифровка рядом с сообщением так полезна: достаточно взглянуть на неё, чтобы проверить имя или число.

Что влияет на качество

Приватность: справедливый вопрос

Голос — это персональные данные. Прежде чем полагаться на любую функцию перевода, прочитай, как сервис обращается с записями и расшифровками и какие у тебя есть возможности управления, например удаление данных и аккаунта. Подход AICO описан в Политике конфиденциальности и в разделе «AI-функции» Центра доверия.

Как это делает AICO

В AICO голосовое сообщение расшифровывается, текст переводится, а затем озвучивается на твоём языке, и расшифровка показана прямо рядом с ним. Если тебе удобнее читать, можно читать. Если хочешь убедиться в какой-то детали, можно проверить. Для разговора в реальном времени в звонках есть переведённые субтитры. Больше ответов — в разделе «Вопросы и ответы».

Слушай друзей на своём языке, на каком бы языке они ни говорили.

Скачать AICO

Читайте дальше