В «VK Видео» запустили умные субтитры

Компания VK (бывшая Mail.ru Group) сообщила о выпуске полезного обновления для платформы «VK Видео». Как рассказали в пресс-службе, в «VK Видео» в 10 раз увеличили объём видео с субтитрами и повысили точность обработки расшифровки речи. 

В VK подчеркнули:

Благодаря этому просмотр видео стал ещё удобнее — речь говорящего оформляется в текстовые субтитры в виде предложений со знаками препинания и заглавными буквами с учётом особенностей разговорной, узкоспециализированной лексики и неологизмов.

В ленте пользователя на главном экране 8 из 10 видео будут с новыми субтитрами. Автоматические субтитры в «VK Видео» генерируют ML-модели. Аудиопоток из видео проходит через несколько этапов обработки. Сначала нейросеть убирает посторонние шумы, выделяет речь и преобразует её в слова, а другие модели превращают расшифровку в текст. Финальный ИИ синхронизирует получившийся текст с аудиодорожкой. Как обещают в компании, новая ИИ-модель допускает на 30% ошибок меньше, чем аналогичные модели генерации субтитров в подобных сервисах.