← Материалы разборы Yersham
разбор · asr
2.0
из 10
смотреть не обязательно — забрать выжимку и пункты
оценка машинная и частично зависит от длины ролика — спорите, открывайте оригинал

VibeVoice ASR: транскрибация до 60 минут с диаризацией

VibeVoice ASR STT from Microsoft - hourly transcription, diarization. Multilingual tests.

Обзор VibeVoice ASR STT от Microsoft: распознавание речи с диаризацией, поддержка 51 языка, до 60 минут аудио, хот-ворды, веб-интерфейс. Тесты на английском, французском и китайском показали хорошие результаты, но проблемы с короткими репликами и отображением китайских субтитров.

Обзор VibeVoice ASR STT от Microsoft: распознавание речи с диаризацией, поддержка 51 языка, до 60 минут аудио, хот-ворды, веб-интерфейс. Тесты на английском, французском и китайском показали хорошие результаты, но проблемы с короткими репликами и отображением китайских субтитров.

что из этого моё

Модель полезна для автоматизации транскрибации и диаризации аудио/видео контента, что можно интегрировать в пайплайны обработки данных для AI-оператора, например, для создания субтитров, анализа звонков или подготовки данных для обучения моделей.

Тезисы ролика
применимого к своей работе линза здесь не нашла
Используйте VibeVoice для транскрибации длинных аудио (до 60 минут) без потери контекста на стыках.
Задавайте хот-ворды (термины) заранее для стабильного распознавания специфичной лексики.
Не включайте сэмплинг для распознавания речи — искажает окончания слов.
Для диаризации важно, чтобы реплики спикеров были достаточной длины — короткие реплики модель может не разделить.
о чём говорят, по времени
главы доводят до 04:46 · дальше по ролику меток нет
01
Введение и возможности00:02
Представление модели VibeVoice от Microsoft: распознавание речи, диаризация, до 60 минут аудио, 51 язык, хот-ворды.
02
Параметры и интерфейс01:35
Описание параметров генерации: токены, сэмплинг, штраф за повторение, хот-ворды.
03
Тест на подкасте02:07
Транскрибация 20-минутного научного подкаста: скорость, формат вывода, аудиосегменты.
04
Веб-версия с субтитрами03:42
Усовершенствованная веб-версия с добавленной функцией субтитров к видео.
05
Мультиязычные тесты04:46
Тесты на английском, французском и китайском: успехи и проблемы.
дальше в дело
Собрать это в маршрут
все маршруты →
не хочешь разбираться сам
Сделаю это под задачу
форматы и цены →
ещё разборы