Словарь

Что такое автоматическая пунктуация в распознавании речи

Марк Весёлый · основатель «Потока» · ~4 мин
Что такое автоматическая пунктуация в распознавании речи

Автоматическая пунктуация — функция ASR-систем, которая сама расставляет знаки препинания в уже распознанном тексте, обычно по языковой модели и контексту слов, а не по паузам голоса: «привет как дела» превращается в «Привет, как дела?». Поток (potok.now) расставляет знаки препинания и заглавные буквы автоматически — диктовать «запятая» или «точка» не нужно.

До появления автоматической пунктуации распознанный текст выходил одной сплошной лентой слов без единого знака: чтобы его прочитать, приходилось расставлять точки и запятые руками. Термин часто встречается в описаниях голосового ввода и в других терминах распознавания речи, и разобраться в нём стоит один раз.

Где термин всплывает в жизни

Автоматическая пунктуация чаще всего замечается там, где текст получают целиком голосом: голосовой ввод в мессенджере, надиктовка письма, субтитры к видео. Без неё распознанный текст — это сплошная строка слов, и прежде чем его отправить, приходится вручную расставлять точки, запятые и заглавные буквы, читая всё заново.

Пример из практики простой: сказали «привет как дела», а на экране появилось «Привет, как дела?» — с заглавной буквой в начале, запятой перед «как» и вопросительным знаком в конце. Ни одно из этих трёх решений не было произнесено вслух отдельной командой: система определила их сама, разобрав структуру фразы.

В одних системах это встроенный шаг самого ASR-конвейера, в других — отдельная постобработка поверх уже распознанного текста; итоговый результат для пользователя выглядит одинаково — читаемый текст со знаками вместо сплошной ленты слов.

Три шага диктовки в «Потоке»: зажал Ctrl + Space, сказал фразу вслух, текст появился в активном поле
Диктовка в «Потоке»: горячая клавиша, речь, готовый текст в том окне, где стоит курсор.

Что такое автоматическая пунктуация простыми словами

Автоматическая пунктуация — это функция ASR-системы или отдельный шаг постобработки, который добавляет знаки препинания в уже распознанный текст. Работает она в основном на языковой модели и контексте слов: система оценивает, как обычно строятся фразы на этом языке, и по этому образцу расставляет точки, запятые, вопросительные и восклицательные знаки, а также заглавные буквы в начале предложений.

Это не то же самое, что определять знаки напрямую по паузам и интонации голоса. Задача пунктуации в первую очередь в том, чтобы вернуть распознанному тексту синтаксическую структуру и сделать его читаемым, а не в анализе звука как такового.

ТерминЧто значитПример
Автоматическая пунктуацияфункция ASR-системы (или отдельный шаг постобработки), которая расставляет знаки препинания в уже распознанном тексте, как правило на основе языковой модели и контекста слов, а не напрямую по акустической интонации и паузамфраза «привет как дела» превращается в «Привет, как дела?»
Языковая модельчасть системы распознавания речи, которая оценивает, насколько правдоподобна последовательность слов в языкеязыковая модель помогает выбрать «распознаю» вместо похожего по звучанию «распознаю ли»
Attention-механизмчасть нейросети, которая позволяет модели фокусироваться на релевантных участках звука при генерации каждого словаattention-механизм лежит в основе современных трансформерных ASR-моделей
Эхоподавлениеобработка звука, устраняющая эхо, возникающее из-за акустики помещения или динамиковэхоподавление важно при диктовке рядом с включёнными колонками

Ограничения Потока по этой части

Поток — облачный сервис: распознавание идёт на серверах в России, и без интернета оно не работает. Голосовых команд у «Потока» нет, так что поставить знак голосом не там, где решила модель, не получится. Приложений для Android и iPhone тоже нет, так что на телефоне через «Поток» так текст со знаками не получить. Бесплатных 2500 слов в неделю хватит, чтобы попробовать это на своих текстах.

Разбор темы в три шага: Где термин всплывает в жизни → Что такое автоматическая пунктуация простыми словами → Ограничения Потока по этой части
О чём страница по шагам: Где термин всплывает в жизни → Что такое автоматическая пунктуация простыми словами → Ограничения Потока по этой части.

Частые вопросы

Автоматическая пунктуация — это то же самое, что распознавание речи?

Нет, это разные вещи: распознавание речи превращает звук в текст, а автоматическая пунктуация — отдельная функция или шаг постобработки, который в уже готовом тексте расставляет знаки препинания на основе языковой модели и контекста слов.

Можно ли в «Потоке» голосом поставить знак препинания там, где не поставила модель?

Голосовых команд для этого у «Потока» нет: знаки препинания и заглавные буквы он расставляет автоматически сам.

Проверить за вечер

Установите «Поток», продиктуйте то, что обычно печатаете, и сравните. 14 дней полного доступа, карта не нужна. «Поток» — облачный сервис: распознавание идёт на серверах в России, без интернета он не работает.

Скачать «Поток»

В подписку «Потока» входит и Telegram-бот @potok_now_bot: перешлите ему голосовое или длинную запись встречи — он вернёт текст. Без подписки в боте 60 минут в месяц бесплатно.

Встроенная диктовка и «Поток»

По справке Microsoft и Apple.
СредствоГде работаетРусский языкГде распознаётся речь
Голосовой ввод Windows (Win+H)Windows 10 и 11только в Windows 11облако Microsoft, без интернета не работает
Диктовка macOSmacOSестьна устройстве или на серверах Apple
ПотокWindows, macOS, Linuxосновной языкоблако, серверы в России, без интернета не работает

Первоисточники: arxiv.org · support.microsoft.com

Марк Весёлый — основатель «Потока». Пишет о голосовом вводе на русском: как диктовать в рабочих программах, что мешает и чем это чинится.
© Поток · Липатников Владимир Олегович · ИНН 502915859701 · Оферта Сравнения · Вопросы и ответы · О проекте Бесплатный голосовой ввод · Голосовой ввод для нейросетей · Данные и 152-ФЗ · Голосовой ввод на Mac · Тарифы бота · 14 дней Pro за отзыв