Частина серії: 30 сценаріїв AI-бота для leisure: від першого запиту до win-back
KPI для AI-бота: п'ять метрик що реально показують якість роботи
П'ять KPI для AI-бота в leisure-бізнесі: від resolution rate до конверсії в запис. Як збирати дані практично і що робити коли метрики сигналізують проблему.
Гайди
KPI для AI-бота: п'ять метрик що реально показують якість роботи
Ваш бот відповідає правильно на 80% запитів? Звідки ви знаєте?
Якщо відповідь «ну, скарг немає», то у вас немає даних про якість бота — у вас є відсутність видимих проблем. Це різні речі. Клієнт, якому бот дав розмиту відповідь, частіше просто закриває чат, ніж скаржиться. Власник не бачить цих втрат.
Бот без метрик — чорний ящик. Він може добре виглядати в дашборді і погано конвертувати. Або навпаки: мати багато handoff-ів, але кожен з них — навмисний і правильний. Метрики дозволяють відрізнити одне від одного.
Навіщо вимірювати якість бота
Три практичні причини:
Перша: KB деградує. Ваші послуги змінюються, прайс оновлюється, умови роботи корегуються. Бот продовжує відповідати по-старому. Без метрик ви не знаєте де і коли це почалось.
Друга: різні відповіді дають різну конверсію. Два варіанти тексту відповіді на питання про ціну можуть давати суттєво різний відсоток переходу до бронювання. Метрики дозволяють це помітити і виправити.
Третя: бот — не вічна машина. Якість роботи AI-бота залежить від якості KB і налаштувань промпту. Без регулярного моніторингу ви не знаєте чи бот покращується або погіршується після кожного оновлення.
Чотири рівні метрик: від технічних до бізнесових
Перш ніж до конкретних KPI — структура. Метрики для бота можна розкласти на чотири рівні:
Технічні. Uptime (доступність бота), latency (час відповіді). Бот має відповідати за менш ніж 2 секунди в 95% випадків. Якщо latency стабільно більше 3 секунд — це вже помітно в UX. Uptime для Telegram-бота на хмарній інфраструктурі має бути 99%+.
Якість відповідей. Відсоток розмов де бот дав точну, корисну відповідь без помилок. Важкий для автоматичного вимірювання, але критичний для розуміння стану KB.
Взаємодія. Як клієнти поводяться в розмові: чи завершують її, чи запитують ще, чи запитують людину.
Бізнес-вплив. Скільки розмов закінчились бронюванням, як змінився no-show rate, чи повертаються клієнти.
П'ять KPI нижче охоплюють усі чотири рівні — і при цьому їх можна відстежувати без складної аналітичної інфраструктури.
П'ять KPI що варто відстежувати щотижня
1. Resolution Rate (% вирішених запитів)
Що вимірюємо: відсоток розмов, які бот завершив без передачі людині.
Як рахувати: (кількість розмов без handoff / загальна кількість розмов) × 100%.
Засновник Leadmlyn. Будую AI-менеджерів для leisure-бізнесу в Україні.