В обновлённом видеоплеере ВКонтакте появились автоматические субтитры на русском языке. Они созданы на базе собственных технологий соцсети по распознаванию речи.

ВКонтакте запустила автоматические субтитры для видео

Реклама: Erid 2VtzqxMEZ7c
Реклама. Erid 2VtzquiXA8E

Новая технология автоматически генерирует текст, расставляет знаки препинания и заглавные буквы, распределяет текст по кадрам и обеспечивает точность появления субтитра в момент произнесения фразы.

Для обеспечения высокого качества расшифровки субтитров аудиопоток проходит четыре этапа обработки. Сначала запись очищается от фоновых звуков с помощью уникальной технологии интеллектуального шумоподавления — это позволяет лучше определять речь не только на профессиональных видео, но и на любительских роликах. Затем нейросеть распознаёт слова и формирует из них текст. На третьем этапе подключается пунктуационная модель: она расставляет знаки препинания и заглавные буквы. Эти решения ВКонтакте ранее применила для распознавания аудиосообщений, а для работы с видео к ним добавили ещё один шаг: методы машинного обучения распределяют текст по кадрам, чтобы фраза появлялась точно в момент, когда говорящий её произносит.

Особое внимание уделено и производительности технологии автоматических субтитров. Инфраструктурные ресурсы используются максимально эффективно, что помогает обрабатывать все загруженные видео и быстро генерировать субтитры для новых роликов.

В ближайшее время смотреть видео с субтитрами станет ещё удобнее. Технология создания автоматических субтитров дополнится диаризацией — это процесс, в котором аудиопоток делится на реплики в соответствии с конкретным спикером. Благодаря диаризации, фразы разных людей в расшифровке будут самостоятельными, даже если собеседники общаются без заметных пауз.

Соцсеть ведёт тестирование и дообучение новой технологии: субтитры в экспериментальном режиме уже доступны части аудитории в популярных роликах и видео из верифицированных сообществ в веб-версии и мобильном приложении ВКонтакте.

До конца года автоматические субтитры станут доступны в большинстве видео ВКонтакте.

Ранее ВКонтакте запустил навигационный поиск, а также добавил опцию отключения индикатора новых Клипов.

Читайте нас в Телеграм
Читайте нас в Телеграм
Комментарии: ВКонтакте запустила автоматические субтитры для видео
Блоги компаний
⚡ В тренде
А вы знали, что даже двухступенчатая аутентификация – не гарантия защиты от взлома профиля? Более того, через нее злоумышленники могут навсегда украсть аккаунт без возможности восстановления. Разберемся, что дает двухфакторка в Инстаграм* и нужно ли ее устанавливать. Мы расскажем, что такое двойная аутентификация в Инстаграм* и от чего она может защитить. Покажем пошаговую инструкцию, как […]
Яндекс запустил функцию генерации видео в приложении «Шедеврум» в августе прошлого года. Сначала функция была доступна только самым активным пользователям, но сейчас ей могут пользоваться все желающие. Генерация видео позволяет создавать короткие ролики, гифки и динамические аватарки для соцсетей. Также, для видео в приложении есть отдельная лента с анимациями, которые сделали другие пользователи. Далее показываем, […]
Вам интересно, почему все постят енота в кружочке, танцующего под песню «Педро-Педро»? Прочитайте про этот тренд в нашей рубрике «мем-разбор», и вам обязательно захочется к нему присоединиться. Мы расскажем, что означает танцующий в кружочке енот, кто и когда придумал этот мем. А еще покажем примеры использования мема и его вариации, объясним значение трендовой песни «Педро-Педро». […]
Команда Сбера представила Kandinsky 3.1 – следующую ступень в развитии предыдущей модели, Kandinsky 3.0. Модель получила множество улучшений, а также была дополнена полезными функциями и режимами, которые расширяют возможности пользователей. Улучшенная модель генерации изображений сегодня стала доступна всем пользователям без ограничений. Обновлённая версия дообучена на датасете эстетичных изображений, что позволило повысить качество генерации картинок. Первоначальный […]
ВКонтакте – самая популярная российская соцсеть. Кто-то пытается с помощью ВК сделать себе имя, а кто-то – заработать. И тем, и другим для достижения своих целей нужны сообщества с большим количеством подписчиков. В статье рассмотрим 10 самых крупных по численности групп ВК и выясним, благодаря чему они стали популярными. Читайте также: Как раскрутить группу в […]
Новости
Свежие статьи