Словарь

Что такое VAD (Voice Activity Detection)

Марк Весёлый · основатель «Потока» · ~3 мин
Что такое VAD (Voice Activity Detection)

VAD (Voice Activity Detection) — это определение участков записи, где действительно звучит речь, в отличие от тишины и шума. По определению из английской Википедии, это обнаружение присутствия или отсутствия речи человека, используемое в обработке речи. Практический пример: VAD отсекает паузы перед отправкой звука на распознавание.

Не всякий звук с микрофона — речь: часть записи занимает тишина, фоновый шум или посторонний шорох. Разбираться в этом вручную не нужно — этим занимается отдельный алгоритм на входе перед распознаванием речи, VAD.

Где термин всплывает в жизни

VAD определяет участки записи, где действительно звучит речь, в отличие от тишины и шума. Задача этого алгоритма — отделить содержательные фрагменты, где кто-то говорит, от того, что речью не является.

Практический пример: VAD отсекает паузы перед отправкой звука на распознавание — то есть на вход дальше идёт не вся запись подряд, а только те её участки, где действительно звучит речь.

По определению из английской Википедии, VAD — это обнаружение присутствия или отсутствия речи человека, используемое в обработке речи. Иными словами, это именно определение факта «есть речь / нет речи», а не что-либо ещё.

Смежные понятия — распознавание речи (ASR) и другие термины из словаря о распознавании речи.

Три шага диктовки в «Потоке»: зажал Ctrl + Space, сказал фразу вслух, текст появился в активном поле
Диктовка в «Потоке»: горячая клавиша, речь, готовый текст в том окне, где стоит курсор.

Определение VAD (Voice Activity Detection) без формул

VAD, или Voice Activity Detection, — это определение участков записи, где действительно звучит речь, в отличие от тишины и шума. Речь идёт именно об определении наличия речи в записи, а не о чём-то ином.

По определению из английской Википедии, VAD — это обнаружение присутствия или отсутствия речи человека, используемое в обработке речи. Отвечает VAD только на один вопрос — есть здесь речь или нет; он не занимается распознаванием слов — этим занимается отдельная технология, распознавание речи (ASR).

ТерминЧто значитПример
VAD (Voice Activity Detection)определение участков записи, где действительно звучит речь, в отличие от тишины и шумаVAD отсекает паузы перед отправкой звука на распознавание
ASR-модельобученная нейросеть, которая непосредственно выполняет распознавание речикачество диктовки напрямую зависит от качества ASR-модели
Восстановление регистра (capitalization restoration)автоматическая простановка заглавных букв в начале предложений и в именах собственныхвосстановление регистра превращает «иван приехал в москву» в «Иван приехал в Москву»
STT (Speech-to-Text)другое название для распознавания речи — преобразование звучащей речи в текстSTT и ASR в быту часто используют как синонимы

Ограничения Потока по этой части

У «Потока» микрофон слушает звук только во время записи — пока зажата клавиша или между двумя нажатиями в режиме «Свободные руки», а не постоянно в фоне; начало и конец записи задаёт сам человек. «Поток» — облачный сервис, без интернета не работает.

Разбор темы в три шага: Где термин всплывает в жизни → Определение VAD (Voice Activity Detection) без формул → Ограничения Потока по этой части
О чём страница по шагам: Где термин всплывает в жизни → Определение VAD (Voice Activity Detection) без формул → Ограничения Потока по этой части.

Частые вопросы

Чем VAD отличается от распознавания речи (ASR)?

VAD только определяет, есть ли в записи речь, — отделяет её от тишины и шума. Распознавание речи (ASR) идёт дальше и превращает уже найденную речь в текст: это разные, хотя и связанные технологии.

Слушает ли «Поток» микрофон постоянно?

Нет: у «Потока» микрофон слушает звук только во время записи — пока зажата клавиша или между двумя нажатиями в режиме «Свободные руки», а не постоянно в фоне. Начало и конец записи задаёт сам человек нажатием клавиши.

Если хотите сравнить сами

Возьмите одну свою задачу и надиктуйте её в «Потоке». Первые 14 дней — без ограничений и без карты. «Поток» — облачный сервис: распознавание идёт на серверах в России, без интернета он не работает.

Скачать «Поток»

В подписку «Потока» входит и Telegram-бот @potok_now_bot: перешлите ему голосовое или длинную запись встречи — он вернёт текст. Без подписки в боте 60 минут в месяц бесплатно.

Встроенная диктовка и «Поток»

По справке Microsoft и Apple.
СредствоГде работаетРусский языкГде распознаётся речь
Голосовой ввод Windows (Win+H)Windows 10 и 11только в Windows 11облако Microsoft, без интернета не работает
Диктовка macOSmacOSестьна устройстве или на серверах Apple
ПотокWindows, macOS, Linuxосновной языкоблако, серверы в России, без интернета не работает

Первоисточники: en.wikipedia.org · support.microsoft.com

Марк Весёлый — основатель «Потока». Пишет о голосовом вводе на русском: как диктовать в рабочих программах, что мешает и чем это чинится.
© Поток · Липатников Владимир Олегович · ИНН 502915859701 · Оферта Сравнения · Вопросы и ответы · О проекте Бесплатный голосовой ввод · Голосовой ввод для нейросетей · Данные и 152-ФЗ · Голосовой ввод на Mac · Тарифы бота · 14 дней Pro за отзыв