Статьи · Проба

Проба AI-агента на месяц: одно число вместо впечатлений

12 октября 2026

В стоматологии на три кресла пациент не приходит и не предупреждает по 11,4 % записей — в среднем это 126 записей в месяц. Продавец предлагает бота-напоминалку: 30 000 тенге в месяц и 50 000 тенге за подключение. Клиника придумана — это один из примеров отчётов, на которых мы проверяем своего агента аудита, — но вопрос у владельца настоящий: брать или нет.

Данные клиники вроде бы на стороне продавца: с напоминанием не приходят 5 % пациентов, без него 17 %. Но в отчёте стоит оговорка, которая годится для любой фирмы: «доказана связь, а не причина». Отметку о напоминании ставят тем, до кого дозвонились, а это могут быть просто более обязательные люди. Поэтому отчёт советует брать бота только на пробный месяц и проверять по одному числу.

Проба — это четыре записи, сделанные до начала: число, срок, условие остановки и человек, который смотрит. Без них через месяц останутся впечатления, а впечатления у продавца всегда хорошие.

Шаг 1. Одно число, и его сегодняшнее значение записано

В клинике это доля неявок: 11,4 %. Не «удобство», не «администраторам стало легче» и не пять показателей сразу. Из пяти чисел за месяц одно улучшится само, и именно его покажут на итоговой встрече.

Число берётся из вашей программы, а не из кабинета продавца, и считается одинаково до и после. В клинике отчёт сначала просит различать в отметке «не звонили» и «не дозвонились»: пока они смешаны, непонятно, что именно изменилось.

И событие должно случаться часто. 126 неявок в месяц хватит, чтобы увидеть сдвиг. Событие, которое бывает пять раз в месяц, за месяц ничего не покажет.

Шаг 2. Срок равен полному кругу работы, а не «двум неделям»

Две недели звучат удобно: коротко и не страшно. Но срок задаёт не продавец, а то, за сколько у вас проходит один полный круг того, что вы меряете.

В стоматологии круг — неделя. Понедельник там хуже остальных дней: напоминание получают 28,6 % записей, не приходят 18,4 %. Проба должна захватить несколько понедельников, и месяц даёт четыре.

В фитнес-клубе (тоже придуманном) плата списывается раз в месяц, повторная попытка идёт пятнадцатого, а абонемент закрывается в последний день месяца. Двухнедельная проба не увидит ни одного полного круга. Отчёт советует смотреть через два цикла списаний.

В учебном центре (придуманном, как и остальные) обычная неделя приносит 71 заявку, а каждая из четырёх недель набора — 165. Администраторы не успевают именно в набор. Проба в тихий месяц о наборе ничего не скажет.

Двух недель хватает, когда событие случается десятки раз в день и недели похожи одна на другую. Во всех остальных случаях проба короче круга измеряет случайность.

Шаг 3. Условие остановки записано до старта

До начала запишите одну фразу: «Если к такой-то дате число не ниже такого-то, отключаем». Порог выбираете вы. В клинике есть ориентир: среди тех, кому напомнили, не приходят 5 %. Если бот напоминает всем, а доля неявок осталась около 11 %, дело было не в напоминании.

Остановка должна быть возможна по договору. Отчёт по клинике ставит условие ещё до денег: продавец подтверждает, что бот подключается к программе записи клиники. Спросите заранее, вернётся ли плата за подключение, если вы остановитесь. Если нет, это цена ответа, и её лучше знать до старта.

Учебному центру предлагают AI-администратора: 150 000 KZT за подключение, 70 000 KZT в месяц и договор на 12 месяцев. За первый год выходит 990 000 KZT. Пробу можно остановить, а этот договор нельзя, поэтому это покупка, как бы её ни называли. Попросить «месяц с правом уйти» ничего не стоит. Отказ продавца — тоже ответ.

Шаг 4. Число смотрит тот, кому всё равно, каким оно выйдет

Не продавец: в его сводке окажется число отправленных сообщений, а не число неявок. И не сотрудник, чью работу меняют. В небольшой фирме это владелец или бухгалтер: раз в неделю, из одной и той же выгрузки, по одной и той же формуле.

Он же следит, чтобы за время пробы менялось что-то одно. Отчёт по клинике ставит перед ботом бесплатный шаг: записанным на понедельник звонить в пятницу. Если ввести это правило и бота в один день, через месяц никто не скажет, что из двух сработало.

Рядом с числом он записывает, сколько времени проба забрала у своих. Бот клиники снимает около 26 часов обзвона в месяц и добавляет 15 минут в день на разбор ответов.

Иногда пробу проводит человек, а не программа

В сервисный центр (придуманный, отчёт здесь) 41,6 % обращений приходят вечером, ночью и в воскресенье. Среди обращений в рабочие часы заказом заканчиваются 42,5 %, среди остальных — 20,5 %. Продавец предлагает бота: 150 000 тенге и 25 000 тенге в месяц.

Отчёт предлагает другое: месяц вечернего и воскресного дежурства с телефона за 60 000 тенге. И сравнить долю заказов с нынешними 20,5 %.

Проверяется при этом не бот, а предположение под ним: вечерний клиент купит, если ему ответить вечером. Отчёт говорит прямо, что вечерние клиенты могут быть просто другими. Дежурный проверит это дешевле бота, и дежурство кончается через месяц само. Про бота поставщик не сказал, можно ли от него отказаться.

Если живой человек вечером не прибавил заказов, ждать их от бота не стоит.

А если прибавил, у вас появляется число, с которым можно сравнивать цену бота.

У пробы три исхода, и «продлим ещё» среди них нет

Оставить, сузить, остановить. Сузить — значит оставить агенту ту часть работы, где число сдвинулось, и убрать остальное.

Бывает четвёртый, честный: данных не хватило. Тогда пробу продлевают один раз и записывают, чего именно ждут и до какой даты. «Продлим, пока непонятно» превращает пробу в подписку.

Отчёт по клинике назначает день заранее: вернуться к решению через месяц после запуска бота. И так же заранее записывает следующую развилку. Если в часы пик по-прежнему теряется треть звонков, сравнить второго администратора на эти часы за 90 000 тенге в месяц и голосового ассистента за 60 000 тенге в месяц и 200 000 тенге за подключение. Условие названо раньше, чем стало известно число.

Что сделать сегодня, пока ничего не куплено

1. Посчитайте своё число за три месяца. Откройте программу записи или CRM. Для клиники это записи с отметкой «не пришёл», делённые на все записи. Запишите результат с датой.
2. Спросите двух сотрудников, как они ставят эту отметку. Если по-разному, сначала договоритесь. Иначе проба измерит путаницу.
3. Назовите свой круг. Что у вас повторяется и за сколько: неделя записи, месяц списаний, сезон набора. Это самый короткий срок пробы.
4. Задайте продавцу письмом два вопроса. Можно ли уйти после первого месяца. И что из уплаченного при этом не вернётся.

Все статьи