Аудитор
AI-перевіряльник читає кожну відповідь до того, як її побачить клієнт, — пропускає, переписує або блокує
Аудитор — друга модель, яка читає кожну чернетку відповіді агента до відправки. Вона пропускає відповідь, змушує агента її переписати або блокує й надсилає запасне повідомлення — за бажанням передаючи чат людині. Працює лише в текстових чатах; дзвінки не перевіряються.
Відкрийте з бічної панелі агента: Монітор > Аудитор. Зміни зберігаються кнопкою Зберегти у верхній панелі агента.
Як працює перевірка
- Безкоштовні передперевірки виконуються для кожної відповіді, без AI і без витрат: некоректні аргументи інструмента, інструмент упав, а агент відповів, ніби все спрацювало, порожня відповідь.
- AI-перевіряльник оцінює відповідь за чотирма критеріями від 0 до 1 — Обґрунтованість, Релевантність, Коректність інструментів, Політика — і виносить вердикт: Пройдено, Виправлено або Заблоковано.
- При Виправлено агент переписує відповідь, і перевіряльник перевіряє її знову — до вказаної кількості спроб. Грубі порушення блокуються одразу, без спроб переписати.
Налаштування
| Поле | За замовчуванням | Що робить |
|---|---|---|
| Увімкнено / Вимкнено | Увімкнено | Вмикає аудитор для цього агента |
| Критерії перевірки | — | Ваші додаткові правила: тон, мова, що не можна казати |
| Запасне повідомлення | вбудований текст | Надсилається замість заблокованої відповіді. Напишіть своє — вбудоване загальне |
| Режим | Лише позначати проблеми | Лише позначати проблеми зберігає вердикт і завжди надсилає відповідь. Виправляти і блокувати дозволяє аудитору змінювати й зупиняти відповіді |
| Коли перевіряти | Кожну відповідь | Кожну відповідь або Тільки ризиковані — був виклик інструмента або в агента є векторна база знань |
| Спроб переписати | 1 | 0–5. Кожна спроба тарифікується як звичайна відповідь |
| Якщо відповідь не пройшла | Запасне повідомлення + передати людині | Запасне повідомлення, Запасне повідомлення + передати людині або Промовчати |
| Таймаут, мс | 8000 | 1000–60000. Якщо перевірка не встигла, вирішує наступне поле |
| Якщо перевірка зламалася | Надіслати відповідь як є | При таймауті чи помилці моделі: Надіслати відповідь як є або Вважати, що відповідь не пройшла |
| Провайдер / Модель | Як в агента | Модель перевіряльника. Краще не та сама, що в агента |
Якщо замовлення вже пройшло, блокування не діє: клієнт отримує повідомлення, що замовлення оформлено, а діалог іде людині.
Почніть з Лише позначати проблеми: перевірка виконується і витрачає токени в обох режимах, тож кілька днів подивіться на вердикти, перш ніж дозволити змінювати відповіді. Доки ви не збережете екран, агент використовує загальний профіль аудитора воркспейсу, якщо його задав адміністратор.
Де видно вердикти
Не на екрані Аудитора — у розмові. Під кожною перевіреною AI-відповіддю в Чатах та Історії є рядок із вердиктом; клікніть його, щоб відкрити Аудит відповіді: вердикт і впевненість, оцінки за критеріями, провалені критерії й помилки передперевірки, відгук перевіряльника, повідомлення клієнта, базову відповідь, кожну регенерацію і підсумкову відповідь, затримку й токени судді.
Вартість
Токени перевіряльника й кожне переписування списуються з балансу воркспейсу і показуються в білінгу як Аудитор. Передперевірки безкоштовні.
Далі
- Тести — ловіть погані відповіді до запуску
- Чати — вердикти в контексті розмови
- Керування AI — що відбувається після передачі людині
Допомогти з рішенням
Happ відповість одразу і за потреби передасть питання менеджеру.