Как проверить результат ИИ: чек-лист перед отправкой клиенту

Ты попросил нейросеть написать письмо клиенту, получил аккуратный текст и отправил. Через день клиент переспрашивает про скидку, которой в твоих условиях нет. Модель её придумала, а ты не проверил. Знакомая история.

Дело не в том, что ИИ ошибается. Ошибается он постоянно и охотно, потому что не знает, что у тебя в прайсе и каких договорённостей ты держишься. Дело в том, что ошибку легко не заметить: текст гладкий и внешне правильный. Разберём, как проверять результат ИИ быстро — по списку, а не на глаз.

Почему ответ ИИ звучит уверенно

Нейросеть подбирает слова, которые обычно стоят рядом в похожих текстах. Это и есть её работа. Она не сверяется с прайсом, не помнит, что ты вчера решил по поставщику, и не знает, кто именно получит письмо. Она выдаёт правдоподобное, а не истинное.

Из-за этого в ответах регулярно всплывают три типа проблем:

• выдуманные факты — цифры, даты, названия, проценты, которых ты не давал;
• общие слова — «широкий ассортимент», «гибкий подход», «индивидуальные решения», за которыми нет смысла;
• чужой тон — текст написан не тому человеку и не в той ситуации.

Проверка результата ИИ — это не про недоверие к технологии, а про то, что черновик и готовый текст — разные вещи.

Чек-лист: пять проверок перед отправкой

Держи короткий список. Его хватает почти для любого текста: письма, поста, описания товара, коммерческого предложения.

1. Факты. Каждая цифра и дата сверены с реальным источником, у каждого названия найден подтверждающий документ.
2. Адресность. Понятно, кому адресован текст и какую задачу он решает.
3. Вода. Нет фраз, которые можно вставить в любой текст без потерь.
4. Тон. Ты бы сказал так живому клиенту вслух?
5. Действие. После текста понятно, что делать дальше.

Теперь по порядку — что стоит за каждым пунктом.

Факты и цифры: что смотреть первым делом

Самый опасный вид ошибки — правдоподобная цифра. Нейросеть легко пишет «скидка 15%», «срок три дня», «более двухсот клиентов». Проверять нужно всё, чего не было в твоём исходном задании.

• числа и проценты — с прайсом, договором, складскими данными;
• сроки и условия — с тем, что ты реально можешь выполнить;
• названия компаний и имена людей — с реальными документами;
• даты и ссылки на события — с первоисточником, если статья новостная.

Простое правило: если факт нельзя подтвердить за минуту, его в тексте быть не должно. Лучше убрать лишнее, чем объясняться.

Вода и общие слова: как вычистить текст

Нейросеть любит формулировки, которые звучат солидно и не значат ничего. Проверка простая: убери фразу и посмотри, изменился ли смысл. Если нет — фраза лишняя.

• «в современном мире» и «в условиях высокой конкуренции» — выкинуть;
• «мы предлагаем широкий спектр услуг» — заменить конкретным списком;
• «индивидуальный подход» — показать примером, что это значит;
• «высокое качество» — заменить фактом о товаре или услуге.

Гладкий текст без конкретики читается как шаблон, и клиент это чувствует. Один точный факт весит больше трёх абзацев общих слов.

Как попросить нейросеть проверить саму себя

Полезный приём: проверять текст не построчно вручную, а поручить модели отдельную проверку. Только не «проверь, всё ли хорошо» — на такой вопрос она ответит «всё отлично». Нужна узкая задача и список того, что искать.

Ты редактор. Вот текст, который написала нейросеть. Проверь его по пунктам: 1) найди все цифры и даты, а также названия, и пометь, каких данных у тебя нет для подтверждения; 2) выпиши фразы-общие слова, которые можно убрать без потери смысла; 3) покажи места, где текст обещает то, чего заказчик не давал. Не переписывай текст, а дай список замечаний с цитатами.

Так модель возвращает не новый текст, а список мест, которые нужно проверить. Это быстрее и честнее, чем вторая генерация «покрасивее».

Как встроить проверку в работу

Проверять по два-три раза вручную выматывает. Помогает порядок действий, а не разовая бдительность.

1. Собирай исходные данные заранее: цены, условия, факты о товаре. Тогда модели есть что использовать и меньше поводов выдумывать. Помогает и как перевести задачу на ИИ.
2. Проси черновик отдельно, а проверку — отдельным заданием.
3. Держи один список проверок для однотипных текстов и не переписывай его каждый раз. Пригодится и материал про ошибки в ответах ботов.
4. Раздели роли: один промпт пишет, второй проверяет по чек-листу.

Когда есть данные и понятное задание, ошибок становится меньше, а времени на правки — заметно меньше. Остаётся привычка: быстрый проход по пяти пунктам перед отправкой.

Проверять результат ИИ проще, когда рядом лежат готовые формулировки заданий: их не нужно придумывать заново.

Читай также: Промпт для черновиков документов: быстро и без юриста и ИИ для малого бизнеса: с чего начать за один вечер.

Мы собрали 50 готовых промптов и 10 задач в один набор «Промты для МСБ». Вставляешь данные — получаешь результат.

Забрать за 1500 ₽

Читай также: все статьи блога