Нейросети Яндекса. Разговор ведёт аллоя.
Яндекс распознаёт речь, формулирует ответ и произносит его. Когда ассистенту говорить, а когда слушать, решает аллоя.
Кто что делает.
Нейросети умеют слушать и говорить. Разговаривать по телефону их учит аллоя.
Слышат и говорят
- Распознавание русской речи
- Языковая модель, которая формулирует ответ
- Синтез естественного голоса
- Поиск по вашим документам
Ведёт разговор
- Определяет, когда собеседник закончил фразу
- Управляет паузами и перебиваниями
- Сопоставляет услышанную речь со своим ответом
- Подготавливает звук телефонной линии к распознаванию
- Управляет восстановлением после сбоев связи
- Решает, когда завершить звонок или позвать человека
- Передаёт модели сведения из ваших документов
Не только в тишине.
Улица, кафе, метро. Перебивания, поправки и чужие разговоры. Проверяем не удачную реплику, а весь звонок.
- Ответы по делу
- 328 из 360
- Звонков, где все ответы прошли проверку
- Ожидание ответа
- 3,7 с
- Медиана для полных и достоверных ответов
- Чужая речь
- 16 из 20
- Звонков с нежелательным ответом, когда сам звонящий молчал
Автоматическая оценка: 314 из 380 звонков зачтены
В кафе ещё теряются вопросы, а чужая речь вызывает лишние ответы. Долгие паузы и отдельные сбои при поправках остаются.
Не получили зачёт: 66 звонков. Учитываем ответы, задержку и ход разговора.
- Начало содержательного ответа
- Медиана 3,7 с · p90 5,3 с
- Завершение ответной фразы
- Медиана 6,5 с · p90 8,2 с
Время рассчитано для 405 из 440 вопросов — только по полным и достоверным ответам.
От конца вопроса до приёма аудио на стенде, по распознанным словам. Не до первого звука и не до воспроизведения на телефоне. Завершение — конец необходимой ответной фразы, а не всей реплики. p90: 90% измерений укладываются в это время.
- Что проверяли
- 16 вопросов о салоне, шесть синтезированных голосов в двух темпах и записи шума. 20 звонков на условие — выбранные сочетания, не все возможные.
- Как звонили
- Распознавание, генерация ответа и синтез речи. Локальный SIP-стенд, звук 8 кГц. Не сеть мобильного оператора.
- Как оценивали
- Все 380 попыток сохранены, включая неудачные и прерванные. Оценка автоматическая. В таблице учитываем полноту и достоверность ответов, в общем итоге — ещё задержку и ход разговора. Недоступная оценка не считается успехом. Когда звонящий молчит, ожидаем тишину.
- Чего замер не доказывает
- Полнота ответа не означает отсутствие повторов. Качество перебиваний этим замером не подтверждено; естественность голоса не оценивали.
Время — медиана для полных и достоверных ответов с замером. Прочерк — нет измерения.
Тишина
- Зачтено звонков
- 20 из 20
- До ответа
- 3,6 с
- Вопросы с замером
- 20 из 20
Улица, шум на 10 дБ тише голоса
- Зачтено звонков
- 20 из 20
- До ответа
- 3,5 с
- Вопросы с замером
- 20 из 20
Улица, шум на 5 дБ тише голоса
- Зачтено звонков
- 19 из 20
- До ответа
- 3,6 с
- Вопросы с замером
- 19 из 20
Улица, шум громкостью с голос
- Зачтено звонков
- 20 из 20
- До ответа
- 3,9 с
- Вопросы с замером
- 20 из 20
Метро, шум на 10 дБ тише голоса
- Зачтено звонков
- 18 из 20
- До ответа
- 4 с
- Вопросы с замером
- 18 из 20
Метро, шум на 5 дБ тише голоса
- Зачтено звонков
- 20 из 20
- До ответа
- 4,1 с
- Вопросы с замером
- 20 из 20
Метро, шум громкостью с голос
- Зачтено звонков
- 20 из 20
- До ответа
- 3,7 с
- Вопросы с замером
- 20 из 20
Кафе, шум на 10 дБ тише голоса
- Зачтено звонков
- 20 из 20
- До ответа
- 3,8 с
- Вопросы с замером
- 20 из 20
Кафе, шум на 5 дБ тише голоса
- Зачтено звонков
- 14 из 20
- До ответа
- 3,7 с
- Вопросы с замером
- 14 из 20
Кафе, шум громкостью с голос
- Зачтено звонков
- 11 из 20
- До ответа
- 4,8 с
- Вопросы с замером
- 11 из 20
Кафе: шум и разговор за соседним столиком
- Зачтено звонков
- 12 из 20
- До ответа
- 4,9 с
- Вопросы с замером
- 12 из 20
Кафе: звонящий молчит, рядом громко говорят
- Зачтено звонков
- 4 из 20
- До ответа
- —
- Вопросы с замером
- —
Эхо ответа в линии
- Зачтено звонков
- 20 из 20
- До ответа
- 3,5 с
- Вопросы с замером
- 20 из 20
Вопрос во время приветствия
- Зачтено звонков
- 17 из 20
- До ответа
- 3,7 с
- Вопросы с замером
- 17 из 20
Второй вопрос и прощание
- Зачтено звонков
- 20 из 20
- До ответа
- 3,4 с
- Вопросы с замером
- 40 из 40
Поправка после ответа
- Зачтено звонков
- 19 из 20
- До ответа
- 3,8 с
- Вопросы с замером
- 38 из 40
Поправка на улице, шум на 5 дБ тише
- Зачтено звонков
- 19 из 20
- До ответа
- 3,7 с
- Вопросы с замером
- 38 из 40
Поправка, голос ослаблен на 12 дБ
- Зачтено звонков
- 19 из 20
- До ответа
- 3,8 с
- Вопросы с замером
- 38 из 40
Просьба подождать и вопрос через 10 секунд
- Зачтено звонков
- 20 из 20
- До ответа
- 3,5 с
- Вопросы с замером
- 20 из 20
| Тишина | 20 из 20 | 3,6 с | 20 из 20 |
| Улица, шум на 10 дБ тише голоса | 20 из 20 | 3,5 с | 20 из 20 |
| Улица, шум на 5 дБ тише голоса | 19 из 20 | 3,6 с | 19 из 20 |
| Улица, шум громкостью с голос | 20 из 20 | 3,9 с | 20 из 20 |
| Метро, шум на 10 дБ тише голоса | 18 из 20 | 4 с | 18 из 20 |
| Метро, шум на 5 дБ тише голоса | 20 из 20 | 4,1 с | 20 из 20 |
| Метро, шум громкостью с голос | 20 из 20 | 3,7 с | 20 из 20 |
| Кафе, шум на 10 дБ тише голоса | 20 из 20 | 3,8 с | 20 из 20 |
| Кафе, шум на 5 дБ тише голоса | 14 из 20 | 3,7 с | 14 из 20 |
| Кафе, шум громкостью с голос | 11 из 20 | 4,8 с | 11 из 20 |
| Кафе: шум и разговор за соседним столиком | 12 из 20 | 4,9 с | 12 из 20 |
| Кафе: звонящий молчит, рядом громко говорят | 4 из 20 | — | — |
| Эхо ответа в линии | 20 из 20 | 3,5 с | 20 из 20 |
| Вопрос во время приветствия | 17 из 20 | 3,7 с | 17 из 20 |
| Второй вопрос и прощание | 20 из 20 | 3,4 с | 40 из 40 |
| Поправка после ответа | 19 из 20 | 3,8 с | 38 из 40 |
| Поправка на улице, шум на 5 дБ тише | 19 из 20 | 3,7 с | 38 из 40 |
| Поправка, голос ослаблен на 12 дБ | 19 из 20 | 3,8 с | 38 из 40 |
| Просьба подождать и вопрос через 10 секунд | 20 из 20 | 3,5 с | 20 из 20 |
Тестовый стенд · 4 ноября 2026
Как мы проверяем.
Ошибку в разговоре дешевле поймать до звонка вашего клиента.
Программные симуляции
Тысячи последовательностей пауз, перебиваний и сбоев — без речевых сервисов. Проверяют логику, в число звонков выше не входят.
Разговоры в шуме
Это замер выше: записи голоса и шума, настоящие речевые сервисы. Локальный SIP-стенд — не сеть мобильного оператора.
Сравнение на одинаковых звонках
Новое поведение сравниваем со старым на одних и тех же вопросах и одинаковом шуме, а не на удачных примерах.
Сначала тест, потом исправление
Каждую найденную ошибку сначала воспроизводим тестом и только потом чиним — так она не вернётся незаметно.
Услышьте сами.
Позвоните по демо-номеру на главной. Задайте вопрос, уточните детали — оцените разговор сами.