Нейросети Яндекс Браузера научились переводить видео с китайского языка и автоматически накладывать русскую озвучку.

Технология уже работает на YouTube, а чуть позже появится поддержка популярной китайской видеоплатформы Bilibili.

Реклама. Erid 2VtzqvBeXTE. ООО «Колтач Солюшнс»
Реклама. Erid 2Vtzqwr1PHi. ООО «Колтач Солюшнс» ИНН 7703388936

Как работает автоматический перевод с китайского в Яндекс Браузере

Яндекс Браузер сам предлагает перевести видео с китайского на YouTube сразу после того, как пользователь его откроет. Нужно просто нажать на кнопку «Перевести видео».

Перевод с китайского

Основные тонкости технологии:

  • Уникальный датасет. Разработчики Яндекса с нуля собрали собственный датасет. С помощью специального алгоритма они обработали 1,5 миллиона видео и выбрали 100 тысяч с качественными субтитрами на севернокитайском языке. Соответствие аудио и субтитров важно, потому что именно по ним нейросеть учится понимать речь.
  • Понимание письменности. Чтобы превращать речь в текст, нейросети браузера выучили тысячи иероглифов. Каждый из них читается как слог. Чтобы нейросеть научилась их понимать, весь необходимый для работы с китайским словарь разработчики закодировали в виде 10 000 токенов.
  • Тоны и контекст. На изучение и распознавание четырёх тонов, определяющих смысл сказанного в китайском языке, у нейросети заняло месяц. Ещё в китайском много омофонов — слов, которые звучат одинаково, но пишутся по-разному и обладают разным значением. Чтобы различать их, нейросети Яндекс Браузера умеют учитывать контекст.

Кроме того, у Яндекса появилась достаточная технологическая база для работы с другими сложными языками. Например, корейским и японским.

Ранее в Яндекс Браузере появились интерактивные субтитры для видео на четырёх языках.

Читайте нас в Телеграм
Читайте нас в Телеграм
Комментарии: В Яндекс Браузере появился автоматический перевод с китайского языка
Блоги компаний
⚡ В тренде
12 storeez – это российский бренд одежды, обуви и аксессуаров. История марки интересна и нетипична. Сейчас компания ежегодно продает свою продукцию на несколько миллиардов рублей. А начиналось все со страницы в соцсети. Рассказываем, как появился и развивался бренд. В чем секрет успеха, и какие амбициозные цели ставит руководство компании. Читайте также: 10 лучших курсов по […]
В маркетинге есть много техник и методик для привлечения и удержания клиентов. От воронки продаж до модели AIDA и создания White paper. Одна из популярных методик — использование лестницы Бена Ханта. В статье расскажем простыми словами: что такое лестница Ханта, из каких этапов она состоит, для чего нужна бизнесу. Читайте также: Где научиться маркетингу — […]
Instagram* представил новый раздел под названием «Лучшие практики Reels» для авторов. В этом разделе вы сможете найти советы, как увеличить охваты рилс и привлекать больше подписчиков. Если вам уже доступно это обновление, вы сможете найти его в «Профессиональной панели». Приводим ключевые советы по созданию Reels, которые помогут набрать больше подписчиков: — Ролики длительностью 30–60 секунд […]
Продвижение через геосервисы привлекает самую прогретую аудиторию – потенциальных клиентов, которые уже готовы совершить покупку. Любому бизнесу будет полезным хороший рейтинг на 2ГИС. Это один из самых популярных агрегаторов товаров и услуг по гео в нашей стране. В этой статье мы расскажем, как формируется рейтинг на 2ГИС и почему он снижается. Также мы расскажем о […]
Гифки делают контент более динамичным. Они повышают вовлеченность аудитории и могут использоваться там, где неуместны громоздкие видео-файлы. Чтобы сделать GIF-анимацию, обратитесь к перечисленным сервисам, некоторые из них доступны бесплатно. Мы расскажем о сервисах, с помощью которых можно сделать гифку из видео. Они отличаются функционалом, у каждого есть свои плюсы и минусы. Читайте также: ТОП-10 конструкторов […]
Новости
Свежие статьи