Нейросети Яндекс Браузера научились переводить видео с китайского языка и автоматически накладывать русскую озвучку.

Технология уже работает на YouTube, а чуть позже появится поддержка популярной китайской видеоплатформы Bilibili.

Реклама: Реклама. Erid 2Vtzqv77mXw
Реклама. Erid 2VtzqvPTeXK

Как работает автоматический перевод с китайского в Яндекс Браузере

Яндекс Браузер сам предлагает перевести видео с китайского на YouTube сразу после того, как пользователь его откроет. Нужно просто нажать на кнопку «Перевести видео».

Перевод с китайского

Основные тонкости технологии:

  • Уникальный датасет. Разработчики Яндекса с нуля собрали собственный датасет. С помощью специального алгоритма они обработали 1,5 миллиона видео и выбрали 100 тысяч с качественными субтитрами на севернокитайском языке. Соответствие аудио и субтитров важно, потому что именно по ним нейросеть учится понимать речь.
  • Понимание письменности. Чтобы превращать речь в текст, нейросети браузера выучили тысячи иероглифов. Каждый из них читается как слог. Чтобы нейросеть научилась их понимать, весь необходимый для работы с китайским словарь разработчики закодировали в виде 10 000 токенов.
  • Тоны и контекст. На изучение и распознавание четырёх тонов, определяющих смысл сказанного в китайском языке, у нейросети заняло месяц. Ещё в китайском много омофонов — слов, которые звучат одинаково, но пишутся по-разному и обладают разным значением. Чтобы различать их, нейросети Яндекс Браузера умеют учитывать контекст.

Кроме того, у Яндекса появилась достаточная технологическая база для работы с другими сложными языками. Например, корейским и японским.

Ранее в Яндекс Браузере появились интерактивные субтитры для видео на четырёх языках.

Читайте нас в Телеграм
Читайте нас в Телеграм
Комментарии: В Яндекс Браузере появился автоматический перевод с китайского языка
Компании
В тренде
Обратная связь от клиентов — важная составляющая бизнеса. Положительные отзывы помогают удержать старых и привлечь новых клиентов, а также повысить узнаваемость бренда. Негативные (или отзывы с предложениями) помогают улучшить сервис и дают понять клиентам, что вам не безразлично их мнение. Больше половины покупателей принимают окончательное решение о покупке после прочтения отзывов о товаре, услуге или […]
Совершая покупку, человек приобретает не товар или услугу, а решение проблемы. Клиент покупает продукт ради пользы или выгоды, которые получит в результате. Задача прогревов – «надавить» на боли клиентов. Акцентировать внимание на проблемах аудитории и показать, как ваш продукт с ними справится. В этой статье расскажем, как прогревать аудиторию перед продажей онлайн-курсов. Рассмотрим рабочие схемы […]
Telegram недавно представил функцию «Похожие каналы», которая рекомендует пользователю каналы для подписки. Теперь, когда человек подписывается на ТГ-канал, у него открывается список похожих публичных каналов, которые подбираются автоматически по пересечению аудиторий. Соответственно, чтобы попасть в рекомендации, необходимо пересечение аудиторий с другим каналом. Читайте также: Как поднять уровень канала в Телеграм Где найти и как посмотреть […]
Уровень канала в Телеграм — это своего рода рейтинг или карма канала, которая даёт доступ к дополнительным функциям. Одной из таких функций являются истории от имени каналов, благодаря которым можно значительно повысить видимость канала для подписчиков. Но есть и другие фичи. В статье рассказываем, как повысить уровень Телеграм-канала — разыграть премиум-подписки, купить/накрутить бусты, мотивировать подписчиков […]
После блокировки ряда зарубежных ресурсов возрос интерес к ВКонтакте, аудитория которого летом текущего года превысила отметку в 100 млн. человек. При помощи групп ВК можно продвигать бренд, продавать товары и услуги, получать доход от рекламы. Чем больше подписчиков, тем более эффективно сообщество будет решать поставленные задачи. В данной статье мы рассмотрим наиболее эффективные способы, позволяющие […]
Новости
Статьи