Статьи · Изнутри

AI-агент — не «умная модель»: семь шагов до одного отчёта

12 октября 2026

Владелец турфирмы — придуманной, из наших примеров отчётов — был уверен, что оплату клиента у него подтверждают в течение часа. В отчёте стоит другое: все 189 первых броней по оплаченным заявкам созданы в понедельник или четверг — в дни, когда в офисе бухгалтер. Отчёт написал наш агент аудита: на таких фирмах мы его проверяем.

В этой находке нет ничего, что «придумал искусственный интеллект». Число 189 посчитала обычная программа. Про «час» сказал сам владелец. Модель поставила одно рядом с другим и написала вывод.

Агент — это не умная модель. Это модель, обложенная обычной программой и правилами, и качество агента определяется тем, что вокруг неё.

Слово «модель» дальше встретится часто, поэтому один раз объясним. Модель — это программа, обученная на огромном количестве текстов. Она умеет читать и писать связно: пересказать, сопоставить, сделать вывод. У неё два свойства, из-за которых её не оставляют одну: она пишет уверенно и тогда, когда не знает, и ошибается в счёте, не замечая этого.

Ниже путь одной задачи — отчёта для той самой турфирмы. Шагов семь, и про каждый сказано, что было бы без него.

Шаг 1. Фирма даёт выгрузки, а не рассказ

Агент начинает с выгрузок из программ фирмы. У турфирмы это 1578 заявок за тринадцать недель. Рассказ владельца — предположение, записи — то, что было на самом деле.

Без этого шага агент вернул бы владельцу его же мнение, только длиннее и увереннее.

Шаг 2. Имена клиентов заменяют раньше, чем данные увидит модель

Обычная программа меняет имена клиентов фирмы на «Клиент 0001» и дальше по порядку. Чтобы увидеть, что оплаченный тур ждёт брони до четырёх суток, имя туриста не нужно.

Без этого шага имена ваших клиентов уходили бы за пределы фирмы ради задачи, для которой они лишние.

Шаг 3. Сотрудников спрашивают о том, чего нет в записях

Выгрузка показывает, что произошло, но не почему. Поэтому агент задаёт вопросы сотрудникам фирмы. В отчёте их ответы видны: старший менеджер говорит, что цена у оператора «живёт день-два», а подборка тура занимает 15–20 минут. Утверждение «на подборки уходит полдня» из-за этого попало в раздел «Что не подтвердилось».

Без вопросов отчёт нашёл бы, где теряются туры, и не объяснил бы почему. А без записей слова людей остались бы словами. Одно проверяют другим.

Шаг 4. Числа считает программа, а не модель

189 броней, 43 неподтверждённые из них, 1,9 дня от оплаты до брони — ни одно из этих чисел модель не считала «в уме». Что посчитать, решает она, но сам расчёт выполняет обычная программа, того же рода, что формула в таблице. На одних и тех же данных она всегда даёт один и тот же ответ, и расчёт можно повторить.

Без этого шага считала бы модель, и каждое число в отчёте пришлось бы пересчитывать руками. Такой отчёт не нужен.

Шаг 5. Модель пишет выводы, и дописывать деньги ей запрещено

Вот здесь модель нужна. Связать оплату, отметку бухгалтера и отказ оператора в одну причину и сказать это человеческим языком формула не умеет.

Но над моделью стоит запрет, и стоит он в программе, а не в просьбе «пиши аккуратно»: денежный вывод без доказательства не проходит. Нет данных — в отчёте стоит «недостаточно данных».

В готовых текстах это видно. В отчёте по придуманной стоматологии нет суммы, в которую клинике обходится одна неявка: этот вопрос стоит в разделе «Чего не хватает и как проверить» с пометкой, что нужен расчёт бухгалтера. В том же отчёте сразу за выводом о неявках идёт оговорка: «доказана связь, а не причина». А на вопрос, виноваты ли менеджеры, отчёт турфирмы отвечает: «нельзя ни подтвердить, ни опровергнуть: журнала звонков и сообщений нет».

Без запрета модель закрыла бы пробел правдоподобной суммой, и владелец принял бы решение по числу, которого нет.

Шаг 6. Отчёт проверяет не тот, кто его писал

Готовый текст проверяет отдельная часть программы. Смысл тот же, что у корректора или второй подписи на платёжке: свои ошибки автор видит хуже чужих.

Без этого шага первым проверяющим стал бы владелец фирмы.

Шаг 7. Перед отправкой отчёт читает наш человек

Последним отчёт читает человек из студии, и только после этого он уходит фирме. Программа ловит то, что можно описать правилом. За отправленное отвечает человек.

Без этого шага фирма получала бы текст, которого не видел никто из людей.

Качество агента — в том, что стоит вокруг модели

Перечитайте список: выгрузки, замена имён, счёт, запрет на недоказанные деньги, человек в конце. Ничего из этого модель не обеспечивает. Это обычная программа, правила и люди, и именно от них зависит, можно ли отчёту верить.

Поэтому фраза «у нас самая мощная модель» говорит об агенте мало. Одну и ту же модель могут взять два продавца, и агенты у них выйдут разные — ровно на то, что построено вокруг.

Проверяем мы тоже не модель, а весь путь целиком: на придуманных фирмах, где правильный ответ известен заранее, а причина потерь спрятана не там, где её ищет владелец. Девять таких отчётов лежат на сайте. Тексты на языке фирмы мы не правили, так что по ним видно, что агент пишет на самом деле, вместе с его оговорками и пробелами.

Четыре проверки, которые можно сделать сегодня

1. Посмотрите, что ушло бы наружу. Откройте выгрузку из своей CRM или программы записи за прошлый месяц и посчитайте столбцы с именами, телефонами и адресами клиентов. Это получит внешняя модель, если никто не заменит их до отправки.
2. Проверьте одно «я и так знаю». Выберите число, которое называете по памяти: за сколько у вас отвечают на заявку или подтверждают оплату. Найдите его в записях за прошлый месяц. Владелец турфирмы называл час; от оплаты до брони по записям проходило 1,9 дня.
3. Задайте вопрос без ответа. Если агент у вас уже работает или вам его показывают, спросите о том, чего в ваших данных точно нет. Аккуратно сделанный агент скажет, что не знает. Остальные ответят.
4. Попросите провести одну задачу по шагам. Так же, как здесь: кто считает числа, что видит модель, кто проверяет текст, кто из людей читает его до отправки. Если на всех четырёх местах стоит слово «модель», вам показывают модель, а не агента.

Все статьи