Аналитика чат-бота: 15 KPI, которые стоит отслеживать

Аналитика чат-бота отвечает на простой вопрос: помогает ли бот вашим клиентам и вашей компании или только производит журналы переписки? В этой статье — 15 KPI чат-бота, как рассчитать каждый и с каких пяти показателей разумно начать небольшой компании. Плюс ежемесячная процедура анализа.

Прежде чем измерять: определите цель чат-бота

Интернет-магазин велоаксессуаров использует чат-бота в основном для вопросов о сроках доставки и размерах. Косметический салон хочет через него записывать клиентов. Налоговая консультация только принимает просьбы перезвонить. Все трое могут собирать одни и те же показатели, но не каждый одинаково важен для всех.

Поэтому заранее запишите одним предложением, для чего нужен бот. Например: он должен сразу отвечать на типовые вопросы и без лишних уточнений вносить запросы на запись в систему бронирования. Из этого предложения и следуют показатели, на которые действительно стоит смотреть. Всё остальное — фоновый шум.

15 главных KPI чат-бота: краткий обзор

KPI	Что показывает	Как рассчитать
1. Доля завершённых диалогов	Диалоги, достигшие цели	Диалоги с достигнутой целью, делённые на все диалоги
2. Длительность диалога	Сколько времени занимает запрос	Среднее время от начала до последнего сообщения
3. Удовлетворённость	Как клиенты оценивают разговор	Короткая оценка в конце диалога
4. Доля распознанных запросов	Как часто бот понимает запрос	Проверка выборки: верно распознанные, делённые на проверенные
5. Доля передач человеку	Как часто приходится подключаться человеку	Передачи, делённые на все диалоги
6. Время ответа	Как быстро реагирует бот	Время между сообщением клиента и ответом
7. Конверсия	Покупки, записи или заявки после чата	Диалоги с конверсией, делённые на все диалоги
8. Повторные пользователи	Пользуются ли клиенты ботом снова	Пользователи с более чем одним диалогом в месяц
9. Доля ошибок	Неверные или неподходящие ответы	Проверка выборки: ошибки, делённые на проверенные
10. Качество лидов	Превращаются ли контакты из чата в заказы	Заказы из чат-лидов, делённые на чат-лиды
11. Стоимость диалога	Сколько стоит один разговор	Ежемесячные затраты с учётом времени на поддержку, делённые на число диалогов
12. Доля прерванных диалогов	Где клиенты уходят из разговора	Прерывания на каждом шаге диалога
13. Время решения	Сколько проходит до полного решения запроса	Время от первого сообщения до решения, в том числе после передачи человеку
14. Допродажи	Дополнительные покупки после рекомендаций	Заказы с рекомендованным товаром, делённые на рекомендации
15. Готовность рекомендовать	Готовность порекомендовать сервис	Net Promoter Score по короткому опросу

Не все эти цифры система выдаёт автоматически. Долю распознанных запросов и долю ошибок, например, можно честно определить, только если человек регулярно читает выборку диалогов. Зато они часто оказываются самыми показательными.

Пять KPI чат-бота для старта

Небольшим компаниям не стоит начинать с 15 показателей. Эти пять дают внятную картину в первые месяцы:

1. Доля завершённых диалогов: делает ли бот то, для чего он нужен?
2. Доля передач человеку: сколько работы всё равно достаётся команде?
3. Доля прерванных диалогов на каждом шаге: на каком этапе клиенты уходят? Часто всё дело в одном неудачном вопросе.
4. Доля ошибок по выборке: не даёт ли бот неверных сведений, например о ценах или часах работы?
5. Конверсия или качество лидов: приводят ли диалоги к записям, заказам или сделкам?

Остальные KPI добавляйте, когда появится конкретный вопрос. Допродажи, например, становятся интересны, только когда бот вашего магазина начинает рекомендовать товары, как описано в статье о товарных рекомендациях в электронной коммерции.

Аналитика чат-бота как ежемесячная процедура

Большинству компаний хватает часа в месяц. Вот рабочий порядок:

1. Перенесите пять основных цифр из панели и поставьте их рядом со значениями прошлого месяца.
2. Прочитайте двадцать случайных диалогов, включая все с плохой оценкой.
3. Запишите три самых частых вопроса, на которые бот не смог ответить.
4. По каждому из них дополните базу знаний или решите, что бот передаёт такой вопрос человеку.
5. Проверьте, быстро ли команда обработала переданные разговоры.

Как это может выглядеть, покажет условный пример. Допустим, косметический салон замечает, что многие клиентки бросают запись в одном и том же месте — на вопросе о желаемой процедуре, ответ на который бот ждёт в свободной форме. Выборка показывает, что клиентки не уверены, как называются процедуры. Салон заменяет вопрос коротким выбором из пяти самых популярных процедур и варианта «другое». В следующем месяце он проверяет, стало ли меньше прерываний на этом шаге. Процедура и задумана для таких небольших точечных исправлений.

Записывайте результаты в простую таблицу. Через полгода вы увидите, меняются ли цифры и подействовали ли ваши изменения. Как превратить эти данные в расчёт экономической эффективности, показывает наша статья «Как измерить ROI чат-бота».

Типичные ошибки интерпретации

Низкая доля передач человеку выглядит хорошо, но может означать, что бот отделывается от клиентов неподходящими ответами, вместо того чтобы вовремя подключить человека. Поэтому всегда читайте выборку, прежде чем радоваться цифре.

Короткий диалог не обязательно хороший. Тот, кто сдался после двух сообщений, тоже попадает в статистику как короткий разговор. А высокая удовлетворённость при небольшом числе оценок мало о чём говорит: оценки обычно ставят либо очень довольные, либо очень недовольные клиенты.

При анализе переписки помните о защите данных: установите сроки удаления, ограничьте доступ узким кругом людей и упомяните анализ в политике конфиденциальности. Для сравнения с чатами, где отвечают люди, полезна наша статья «Чат-бот или живой чат».

Частые вопросы

Какой показатель самый важный?

Тот, что напрямую соответствует задаче вашего бота. Для бота записи — число записей, для сервисного бота — доля решённых обращений без передачи человеку. Но одного показателя никогда не хватает: ему всегда нужна выборка для перепроверки.

Сколько диалогов нужно для надёжных цифр?

Если диалогов всего несколько десятков в месяц, доли сильно колеблются. Тогда лучше смотреть на более длинные периоды и подробнее читать больше разговоров, а не сравнивать проценты.

Влияет ли уведомление об ИИ на мои показатели?

Возможно, вырастет число клиентов, которые сразу просят связать их с человеком. Это не повод убирать уведомление: Регламент ЕС об ИИ (EU AI Act) требует прозрачности. Лучше отслеживайте такие просьбы как отдельный показатель и предложите простой способ заказать обратный звонок.

Любая ли система чат-ботов даёт такие отчёты?

Большинство показывает объём диалогов, длительность и передачи человеку. Для конверсии и качества лидов обычно нужна связь с магазином, системой записи или CRM. Перед покупкой точно уточните, какие данные можно выгружать.

Итог

Хорошая аналитика чат-бота — не кладбище цифр, а короткая ежемесячная процедура: пять показателей и двадцать прочитанных диалогов. Так вы рано заметите слабые места и сможете точечно улучшать бота. Как с самого начала настроить бота так, чтобы его можно было измерять, показывает инструкция по внедрению чат-бота. Для интернет-магазинов обзор даёт страница «ИИ-ассистент по продажам для интернет-магазинов».