Аудитор
AI-проверяющий читает каждый ответ до того, как его увидит клиент, — пропускает, переписывает или блокирует
Аудитор — вторая модель, которая читает каждый черновик ответа агента до отправки. Она пропускает ответ, заставляет агента его переписать или блокирует и отправляет запасное сообщение — и, если так настроено, передаёт чат человеку. Работает только в текстовых чатах; звонки не проверяются.
Откройте его из боковой панели агента: Монитор > Аудитор. Изменения сохраняются кнопкой Сохранить в верхней панели агента.
Как работает проверка
- Бесплатные предпроверки выполняются для каждого ответа, без AI и без затрат: неверные аргументы инструмента; инструмент упал, а агент ответил так, будто всё сработало; пустой ответ.
- AI-проверяющий оценивает ответ по четырём критериям от 0 до 1 — Обоснованность, Релевантность, Корректность инструментов, Политика — и выносит вердикт: Пройдено, Исправлено или Заблокировано.
- При Исправлено агент переписывает ответ, и проверяющий проверяет его снова — до заданного числа попыток. Грубые нарушения блокируются сразу, без переписывания.
Настройки
| Поле | По умолчанию | Что делает |
|---|---|---|
| Вкл. / Выкл. | Вкл. | Включает аудитор для этого агента |
| Критерии проверки | — | Ваши дополнительные правила: тон, язык, что нельзя говорить |
| Запасное сообщение | встроенный текст | Отправляется вместо заблокированного ответа. Напишите своё — встроенное слишком общее |
| Режим | Только отмечать проблемы | Только отмечать проблемы сохраняет вердикт и всегда отправляет ответ. Исправлять и блокировать позволяет аудитору менять и останавливать ответы |
| Когда проверять | Каждый ответ | Каждый ответ или Только рискованные — был вызов инструмента или у агента есть векторная база знаний |
| Попыток переписать | 1 | 0–5. Каждая попытка тарифицируется как обычный ответ |
| Если ответ не прошёл | Запасное сообщение + передать человеку | Запасное сообщение, Запасное сообщение + передать человеку или Промолчать |
| Таймаут, мс | 8000 | 1000–60000. Если проверка не успела, решает следующая настройка |
| Если проверка сломалась | Отправить ответ как есть | При таймауте или ошибке модели: Отправить ответ как есть или Считать, что ответ не прошёл |
| Провайдер / Модель | Как у агента | Модель проверяющего. Лучше не та же, что у агента |
Если заказ уже оформлен, блокировка не действует: клиенту сообщают, что заказ оформлен, а чат уходит человеку.
Начните с Только отмечать проблемы: проверка выполняется и тратит токены в обоих режимах, поэтому несколько дней посмотрите на вердикты, прежде чем разрешать менять ответы. Пока вы не сохраните экран, агент использует общий профиль аудитора воркспейса, если его задал администратор.
Где видны вердикты
Не на экране Аудитора — в разговоре. Под каждым проверенным AI-ответом в Чатах и Истории есть строка с вердиктом; нажмите на неё, чтобы открыть Аудит ответа: вердикт и уверенность, оценки по критериям, проваленные критерии и ошибки предпроверок, отзыв проверяющего, сообщение клиента, базовый ответ, каждую регенерацию и итоговый ответ, задержку и токены судьи.
Стоимость
Токены проверяющего и каждое переписывание списываются с баланса воркспейса и показываются в биллинге как Аудитор. Предпроверки бесплатны.
Дальше
- Тесты — ловите плохие ответы до запуска
- Чаты — вердикты в контексте разговора
- Контроль AI — что происходит после передачи человеку
Help me solve it
Happ answers right away and hands over to a manager when needed.