Как работает скайп Star Trek Translator

Skype с самого начала преодолевал географические барьеры, но новый Skype Translator должен устранить языковые барьеры и кардинально изменить способ общения людей через национальные границы. Представьте себе разговор в реальном времени с кем-то на другом конце планеты, который не говорит ни слова на вашем языке. Впервые в истории Skype Translator делает это возможным.

Что это?

Skype Translator делает то, что давно мечтает о научной фантастике

: это позволяет людям, которые говорят на разных языках

общаться устно. Слова каждого человека переводятся в режиме реального времени и повторяются на родном языке другого человека, что позволяет вести очень естественный и естественный разговор. Конечно, это не идеальная система, но она имеет большой потенциал и, вероятно, даст Skype преимущество в условиях растущей конкуренции со стороны Apple FaceTime и небольших видео-чатов.

,

Как это устроено

Что делает Skype Translator интересным для меня, так это то, что ни один из его компонентов не обязательно революционен сам по себе. Это набор уже существующих технологий, которые Skype с помощью своей материнской компании Microsoft умело объединила для создания действительно инновационного продукта. Можно утверждать, что именно так создаются лучшие продукты — не изобретая что-то совершенно новое, а комбинируя ресурсы, которые у вас уже есть, так, как никто раньше не делал.

Когда вы путешествуете в другую страну, где вы не говорите на языке, необходим переводчик. Переводчик выступает в роли посредника, позволяя общаться между людьми, которые не говорят на общем языке. Skype Translator работает аналогично: он добавляет бота в ваш разговор — по сути, третьего участника вызова — и бот выполняет функцию человеческого переводчика. Он переводит то, что вы говорите, когда вы закончили говорить, и переводит то, что говорит другой человек, когда они закончили говорить. Затем, используя технологию преобразования текста в речь, он читает перевод вслух.

На первый взгляд, это выглядит довольно просто — но это больше, чем кажется на первый взгляд.

Распознавание речи

Google-голосовая транскрипция

Распознавание речи — важнейший компонент Skype Translator — было ужасным в течение долгого времени. Диапазон и неоднозначность человеческой речи — это кошмар для инженеров по распознаванию речи, особенно при фильтрации через шумные жестяные колонки мобильных устройств. Однако в последнее время вы, возможно, заметили значительное улучшение качества распознавания речи для таких сервисов, как Siri, Cortana и Google Now.

Это связано с влиянием технологии под названием «Глубокие нейронные сети».

”(DNN) — метод, показанный для получения гораздо более точных и надежных результатов, чем традиционные системы преобразования речи в текст. После применения более 300 часов речевого обучения к системе DNN для распознавания речи исследователи Microsoft достигли уровня ошибок в словах всего 18,5 процента, что на 33 процента меньше по сравнению с результатами, полученными от ведущей традиционной системы преобразования речи в текст.

Перевод

испанский

После перевода произнесенных слов в текст Skype Translator переводит этот текст с одного языка на другой, используя ту же технологию, что и Bing Translator. Система специально подготовлена ​​для разговорного языка, который отличается от других моделей перевода, предназначенных для формального письменного текста. Он сочетает в себе широкие знания языка Bing Translator с дополнительным слоем слов и фраз, обычно используемых в разговорных разговорах. Кроме того, он автоматически удаляет слова-наполнители, такие как «ах» и «ум», а также мертвый воздух.

Машинное обучение

Секретный соус для каждого из компонентов Skype Translator — надежное машинное обучение Microsoft

Платформа. Программное обеспечение учится из различных источников — в том числе переведенных веб-страниц, видео с подписями и реальных индивидуальных данных обучения — чтобы лучше понимать и переводить самые разнообразные темы, акценты и диалекты пользователей Skype. Все эти данные вводятся в систему машинного обучения и используются для построения статистической модели слов и их контекстов — поэтому, когда вы говорите что-то в разговоре Skype Translator, программное обеспечение может искать что-то похожее в этой статистической модели и предоставлять соответствующий перевод соответственно.

Опыт

Skype Translator в настоящее время доступен для предварительного просмотра, и первоначальные тестеры, похоже, его любят. Питер Брайт из Ars Technica, несмотря на некоторые проблемы с первоначальной настройкой, был особенно впечатлен:

Я не говорю ни слова по-испански — вместо этого я учил немецкий в школе — но с помощью Skype Translator мне удалось поговорить с говорящим по-испански, как если бы я был в эпизоде ​​«Звездного пути» (пока этот эпизод не Дармок, амирит?). Я говорил по-английски. Мгновение спустя появится транскрипция на английском языке вместе с переводом на испанский. Тогда испанский голос прочитал бы этот перевод.

Потребовалось время, чтобы привыкнуть к темпу разговора — небольшая задержка перевода означает, что если вы понимаете язык другого человека, возникает соблазн ответить немедленно, не дожидаясь голоса, чтобы прочитать перевод, — но как только этот ритм был выучен, разговор был свободным и непрерывным.

По общему мнению, опыт невероятен.

Это практично?

Как бы я не волновался за Skype Translator, я не уверен, что буду использовать его для общения со своими друзьями на иностранных языках. Зачем? Потому что у меня нет друзей по иностранным языкам. Большинство людей не знают, что язык — довольно серьезный барьер для начала любых отношений. Эта технология изменит это? Возможно — но это займет некоторое время.

Skype Translator может стать ценным активом для международного бизнеса, если он точен. Помимо этого, как отмечает Питер Брайт, он может найти ценность в семьях со смешанным языком, где бабушка и дедушка и внуки не имеют общего языка.

Существует множество приложений для этой технологии, и, поскольку другие компании начинают делать подобные вещи — как они почти наверняка сделают — это откроет возможности для отношений, которые никогда не были бы возможны раньше. Кто знает? Возможно, через несколько лет у меня появятся друзья на иностранных языках.

Если вы хотите зарегистрироваться в качестве предварительного просмотра Skype Translator, вы можете сделать это здесь.

А пока мы хотим услышать ваши мысли! Будете ли вы использовать Skype Translator? Вы взволнованы этим? Дайте нам знать в комментариях ниже!

Изображение предоставлено: Skype, TechCrunch

Ссылка на основную публикацию
Adblock
detector