Нейросети Яндекс Браузера научились переводить видео с китайского языка и автоматически накладывать русскую озвучку.

Технология уже работает на YouTube, а чуть позже появится поддержка популярной китайской видеоплатформы Bilibili.

Реклама. Erid 2VtzqvV8xTw. ООО «Клик.ру», ИНН 7743771327.
Реклама. Erid 2VtzqwZMkSy. ООО «Клик.ру», ИНН 7743771327.

Как работает автоматический перевод с китайского в Яндекс Браузере

Яндекс Браузер сам предлагает перевести видео с китайского на YouTube сразу после того, как пользователь его откроет. Нужно просто нажать на кнопку «Перевести видео».

Перевод с китайского

Основные тонкости технологии:

  • Уникальный датасет. Разработчики Яндекса с нуля собрали собственный датасет. С помощью специального алгоритма они обработали 1,5 миллиона видео и выбрали 100 тысяч с качественными субтитрами на севернокитайском языке. Соответствие аудио и субтитров важно, потому что именно по ним нейросеть учится понимать речь.
  • Понимание письменности. Чтобы превращать речь в текст, нейросети браузера выучили тысячи иероглифов. Каждый из них читается как слог. Чтобы нейросеть научилась их понимать, весь необходимый для работы с китайским словарь разработчики закодировали в виде 10 000 токенов.
  • Тоны и контекст. На изучение и распознавание четырёх тонов, определяющих смысл сказанного в китайском языке, у нейросети заняло месяц. Ещё в китайском много омофонов — слов, которые звучат одинаково, но пишутся по-разному и обладают разным значением. Чтобы различать их, нейросети Яндекс Браузера умеют учитывать контекст.

Кроме того, у Яндекса появилась достаточная технологическая база для работы с другими сложными языками. Например, корейским и японским.

Ранее в Яндекс Браузере появились интерактивные субтитры для видео на четырёх языках.

⭐ Тестим нейросети каждый день, а то, что реально работает — сливаем в Telegram-канал: «Промты — и точка».

⭐ Тестим нейросети каждый день, а то, что реально работает — сливаем в Telegram-канал: «Промты — и точка».

Комментарии: В Яндекс Браузере появился автоматический перевод с китайского языка
Блоги компаний
⚡ В тренде
Вы уверены, что используете все эффективные способы продвижения в Инстаграм*? Предлагаем свериться с нашей подборкой – тут больше 19 инструментов для раскрутки аккаунта. Мы расскажем, что изменилось в Инстаграм*-продвижении в 2025 году, как реагировать на эти изменения. Далее перечислим, какие способы раскрутки работают в 2025 году. Среди них встретятся как новые инструменты, так и старые, […]
Вы просите нейросеть: «Напиши текст про искусственный интеллект для блога». Она пишет. Всё правильно, вроде бы даже информативно. Но… скучно. Не тот стиль, не та подача, не тот фокус. Вы начинаете уточнять: «Пиши как человек», «ироничнее», «как в Telegram», «а сделай с заголовками», «а теперь разбей на абзацы». Каждое уточнение — это попытка вручную направить […]
Вы замечали, что в ленте — TikTok, YouTube или Reels — всё чаще попадаются видео со странными существами, дурацкими надписями и с именами вроде Бомбарди́ро Крокоди́ло или Тунг Тунг Саху́р? Они танцуют, визжат, кричат фразы на непонятном языке и ведут себя так, будто сами не понимают, что делают. Всё это — не просто странный юмор, […]
ИИ уже давно стал частью нашей жизни — он помогает решать задачи, создавать тексты и работать быстрее. OpenAI постоянно выпускает новые версии ChatGPT — от GPT-3 до мощных reasoning-моделей серии o3-pro. Чтобы эффективно пользоваться ИИ, важно понимать различия между моделями и выбирать подходящую под задачу — будь то быстрый ответ, творчество, глубокий анализ или работа […]
ПМЭФ — это Петербургский международный экономический форум, одно из главных ежегодных событий для бизнеса, власти и экспертов в России. Форум проводят с 1997 года, а с 2005-го он проходит при участии президента РФ. Это место, где обсуждают экономику, заключают крупные сделки, запускают госинициативы и просто обмениваются контактами и влиянием. В этой статье расскажем, когда и […]
Новости
Свежие статьи