Ты поручаешь письмо клиенту, расчёт или пакет документов для налогового консультанта. Через час приходит ответ: «Готово, всё проверено». Ты не перепроверяешь: ты для того и поручил, чтобы не делать это самому. А через неделю ошибку находит клиент. Или Steuerberater звонит в третий раз и просит дослать то, чего в пакете не было.
Неважно, кто написал «проверено»: сотрудник, подрядчик или AI. Слово одно и то же, и по нему не видно, что на самом деле сделали.
Проверь себя за 10 минут
- Найди пять последних сообщений от сотрудников, подрядчиков или AI со словами «проверено», «готово», «всё внесено».
- Посчитай, у скольких из них написано, с чем именно сверяли: с договором, с прошлым счётом, с письмом клиента.
- Возьми сообщение, где источник назван, открой его и сравни одну конкретную вещь: сумму, дату или состав.
- Вспомни, сколько предупреждений твоей CRM, почты или бухгалтерской программы ты за последнюю неделю действительно прочитал, а не просто закрыл.
Если в большинстве сообщений не сказано, с чем сверяли, ты принимаешь «проверено» на веру. Если в третьем пункте нашлось расхождение, значит, даже названный источник ещё не означает, что сверку сделали. А если предупреждения ты почти не читаешь, рассчитывать на них нельзя. Я сам понял это не сразу, на своих AI-агентах.
Я думал, проблема в том, что AI отправляет без меня
Мои AI-агенты готовят письма, счета, комментарии в CRM и документы для бухгалтерии в моих бизнесах. Раз в неделю я разбираю, какие ошибки дошли до клиентов и коллег, и выбираю одну, самую дорогую, а не десять сразу.
Однажды агент создал счёт в CRM раньше, чем добавил в него позиции. Автоматика CRM отправила его клиенту, и клиент дважды получил пустой счёт на 0,00 €. Я написал агенту: «Так, ничего не делай. Я сейчас всё сам поправлю, а потом разберём ситуацию, чтобы её больше так никогда не возникло».
В одном разборе мы выделили шесть ошибок: в отправках клиентам и коллегам и в изменениях CRM. Разные, но общее у них одно: действие происходило раньше проверки. Я решил, что дело только в этом: агент не должен отправлять ничего, чего я не видел.
Предупреждения у агента уже были. В одной рабочей сессии программа 11 раз напомнила ему проверить текст перед отправкой, и текст не изменился ни разу. Предупреждение можно пропустить, и его пропускают, так же как ты закрываешь всплывающие окна CRM, не читая. Поэтому я поставил не ещё одно напоминание, а стоп: перед отправкой письма, счёта или сообщения агент останавливается, пока я не увидел текст.
За первую же неделю стоп 12 раз остановил первую попытку отправки. Переделок стало меньше, и письма я теперь спокойно поручаю агенту.
Агент показывал мне текст. Ошибки всё равно доходили до клиентов
Через неделю разбор показал, что главная ошибка сместилась. Агент показывал мне текст перед отправкой, но в текстах стояли «сверено», «всё внесено», «вопросов нет», и я соглашался, потому что текст выглядел проверенным. Я тоже верил слову «проверено».
Например, ежемесячный пакет документов для налогового консультанта агент собрал по архиву прошлого месяца и назвал сверенным. Отдельные письма, которыми коллега раньше досылал консультанту документы, в сверку не попали, и агент потом сам это признал. Консультант звонил трижды, и мы три раза досылали то, чего не хватало: остатки на начало месяца в кассовой книге, выписку банка в нужном формате, отчёт PayPal по операциям. По оценке разбора, только на исправления ушло около полутора часов.
Другой случай: неверную сумму в сообщении клиенту уже разобрали и исправили. Через несколько дней агент в своей проверке сослался на это решение и всё равно отправил клиенту ту же ошибку: надбавку 1 500 € вместо 2 850 €.
В этом разборе я выделил четыре таких случая, которые дошли до клиентов или коллег. Во всех четырёх дело было уже не в отправке без меня, а в том, что стояло в тексте. Показать текст и проверить его оказалось не одно и то же.
Почему «проверено» ничего не гарантирует
Человек или AI действительно что-то проверил, только не обязательно то, что важно клиенту. Так было с налоговым пакетом: сверка была, только не со всем, что консультанту раньше отправляли. По слову «сверено» этого не видно.
Ссылка на источник тоже не спасает. В случае с надбавкой агент сослался на правильное решение и всё равно пропустил сумму. Сослаться на источник ещё не значит сравнить с ним.
Почему ответ AI так трудно оценить, я разбирал в статье «AI есть, а легче не стало»: с AI люди в среднем переоценивают свой результат, причём и сильные, и слабые. Этот эффект я показывал и в рилсе про Даннинга-Крюгера. Здесь тот же механизм, только на шаг дальше: результат работы с AI кажется лучше, чем он есть, а это уже письмо или счёт, которые уходят клиенту.
Что я делаю теперь
Стоп перед отправкой. Мы встроили в отправку паузу: сначала я вижу текст, затем агент продолжает. Предупреждение оставляет возможность продолжить. Стоп блокирует действие до выполнения условия.
Проверка не автором. Надбавку 1 500 € нашёл, уже после отправки, не агент, который готовил сообщение, а отдельный агент-проверяющий. Он этот текст не писал. Сам агент такую проверку не запускает, поэтому перед отправкой писем с суммами её запускаю я.
Правило «с чем сверено». После этого разбора мы решили: слово «проверено» пишется только вместе с тем, с чем сверено, не «всё проверено», а «сумма сверена с договором, пункт 4». Задумано так: если источник не назван, отправка останавливается, как в первом стопе. Этот второй стоп мы сформулировали и передали на реализацию. Название источника само ошибку не поймает, но без него сверять не с чем: ни мне, ни проверяющему.
Метод простой: одна главная ошибка, один стоп, через неделю смотрю, куда сместилась следующая.
Как внедрить у себя
Для этого не нужен AI. Те же шаги работают с сотрудниками и подрядчиками.
- Раз в неделю 30 минут на разбор. Какие ошибки дошли до клиентов, коллег или налогового консультанта на этой неделе? Сколько стоила каждая: время, деньги, нервы клиента?
- Одна главная ошибка за раз. Выбери самую дорогую. Список из десяти пунктов не исправит ни один.
- На неё стоп до действия, а не предупреждение. Например, счёт клиенту уходит только после второй пары глаз, а письмо с суммой только после сверки с договором. Стоп ставь только на то, что уходит клиенту с суммой или сроком, а не на всё подряд.
- «Проверено» только с источником. Договорись с командой и с AI: «проверено» пишется вместе с тем, с чем сверено и что именно сравнили. «Проверено» без этого считается непроверенным. Раз в неделю сам открой один такой источник и сравни.
- Через неделю проверь, сработало ли. Ошибка этого типа повторилась? Куда сместилась следующая? С неё начинается новый круг.
Начать можно завтра с четвёртого шага: напиши команде одно правило. «Проверено» пишется вместе с тем, с чем сверено. Если AI у тебя уже готовит письма, добавь второе: AI не отправляет клиенту то, чего ты не видел.
Как внедрить вместе с нами
Этот разбор и стопы мы можем настроить под твою фирму вместе: для команды и для AI, если он у тебя уже работает.
Если письма, счета или документы в твоей фирме готовят сотрудники, подрядчики или AI, а ты то веришь на слово, то перепроверяешь каждую строчку, запишись на диагностику через форму на этой странице. Посмотрим, где у тебя нужна проверка до отправки, как работают AI-агенты, если они уже есть, и с какой задачи начать. Это 30 минут разговора со мной лично. В месяц я провожу не больше пяти таких разговоров.
Вопросы и ответы
Он и так пишет, что проверил. Просьба меняет слова в ответе, а не то, что сделано. Работает правило с проверяемым результатом: с чем именно сверено и что сравнили.
Предупреждение оставляет возможность продолжить. Стоп блокирует действие до выполнения условия, например пока текст не увидел человек.
Мало. Я тоже смотрел и соглашался, потому что текст выглядел проверенным. Смотреть текст и сверять его с источником: это разные вещи. Нужно знать, с чем сверено.
Нет. Сотрудник, который пишет «всё внесено», и подрядчик, который пишет «готово», делают то же самое. AI пишет много и быстро, поэтому на нём это заметно раньше.
Разбор раз в неделю, около получаса. Само правило «проверено только с источником» времени почти не добавляет: источник всё равно открывали, если действительно проверяли.
