Вторая пара глаз: пусть нейросети проверяют друг друга

Один документ, отданный на рецензию другой модели, ловит то, чего не видит автор — и та, что писала. Приём, его границы и почему он не заменяет вас.

Проверка 6 мин

Своя работа проверяется плохо. Вы читаете то, что хотели написать, а не то, что написали, — это известно всякому, кто вычитывал собственный текст. С результатом нейросети то же самое, только хуже: он гладкий, уверенный и потому не вызывает подозрений.

Есть простой приём: отдать готовое на рецензию другой модели. Не той, что писала. Занимает минуту, а находит то, что вы бы пропустили.

Как это делается

Берёте готовый результат — письмо, коммерческое предложение, записку, инструкцию — и открываете другой чат. Не продолжение разговора, где текст рождался, а именно другой: чужой взгляд ценен тем, что не знает, как всё задумывалось.

Ниже документ, который я собираюсь отправить. Разбери его как строгий
рецензент и найди:
— утверждения о фактах без источника или подтверждения;
— числа, которые не выводятся из приведённых данных;
— обещания и обязательства, которые автор может быть не вправе давать;
— места, где рекомендация подана как вывод из фактов;
— формулировки, которые адресат может понять иначе, чем задумано.

По каждому пункту: цитата, в чём проблема, как переформулировать.
Если документ хорош — так и скажи, не выдумывай замечаний.

Последняя строка обязательна. Без неё модель найдёт замечания в любом тексте, включая безупречный: она понимает задачу как «покритикуй» и добросовестно её выполняет.

Реальный прогон: одно слово меняет правило

Первый вариант памятки: модель добавила слово «только» в правило об обращениях

В первом варианте учебной памятки Claude написал: «обращения принимаются круглосуточно, но только через форму». В исходном правиле было сказано, что обращения через форму принимаются круглосуточно; запрета на другие каналы там не было. Одно добавленное слово незаметно превратило описание канала в ограничение для клиента.

Исправленный вариант памятки без придуманного ограничения

Во втором проходе ограничение убрали: «обращения через форму поступают круглосуточно». Заодно сохранили ссылки на исходные правила R1.1–R1.4, чтобы каждую строку было легко сверить. Оба экрана — реальные результаты модели на вымышленных правилах; личных и рабочих данных в них нет.

Почему это работает

Другая модель не знает вашего замысла. Она видит только текст — ровно как получатель. Всё, что в тексте не сказано, для неё не существует, и это честнее любого вашего перечитывания.

У неё нет памяти разговора. Модель, писавшая документ, помнит все ваши уточнения и мысленно достраивает их к тексту. Свежая — нет.

Разные модели ошибаются по-разному. Там, где одна уверенно выдумала цифру, другая её не подтвердит, потому что выдумывает в других местах. Совпадение двух независимых ответов — слабое, но настоящее свидетельство; расхождение — прямое указание, куда смотреть.

Что с этим делать дальше

Ответ рецензента — не приговор и не список задач. Он сортируется на три части.

Согласиться и поправить. Обычно это очевидные вещи: непроверенное число, обещание срока, двусмысленная формулировка.

Отклонить осознанно. Часть замечаний будет мимо: рецензент не знает контекста, договорённостей и того, что адресат в курсе половины изложенного. Отклонять — нормально, но вслух проговорите почему.

Проверить самому. Самая ценная часть: рецензент указал на утверждение, и вы вдруг понимаете, что не помните, откуда оно взялось. Вот здесь и находятся настоящие проблемы.

Границы приёма

Вторая модель не эксперт. Она ошибается так же уверенно, как первая. Её замечание — повод посмотреть, а не доказательство ошибки.

Она не знает ваших фактов. «Число не подтверждено» может означать, что оно взято из вашей выгрузки, о которой рецензент не знает. Проверять надо вам.

Она не заменяет предметного специалиста. В юридическом, бухгалтерском и техническом тексте вторая модель ловит только формальные признаки. Правовой вывод, расчёт и техническое решение проверяет человек, который за них отвечает.

Она не отменяет светофора. Документ уходит второй модели так же, как первой. Если он красной зоны — не уходит никуда, и рецензия отменяется вместе с исходной работой.

Обратный ход: попросите оспорить

Тот же приём в другой формулировке, полезный для решений, а не текстов.

Вот аргументация и вывод, к которому я пришёл. Найди в ней слабые места:
что здесь принято на веру, какие альтернативные объяснения не рассмотрены,
что должно быть верно, чтобы вывод развалился.

Здесь ценно не то, что модель что-то опровергнет, а то, что она назовёт условия, при которых вы неправы. Дальше вы смотрите, выполняются ли они. Это дешёвый способ поймать себя на том, что решение принято до анализа, а анализ подобран под него.

И про меру

Приём стоит минуту, поэтому соблазн прогонять через рецензию всё подряд велик. Не стоит: на коротком письме коллеге это лишний шаг, а внимание расходуется зря.

Разумное правило — рецензировать то, что уходит наружу или под вашим именем: коммерческое предложение, письмо клиенту, записку руководителю, инструкцию для отдела. Всё, что можно переписать за минуту без последствий, в рецензии не нуждается.

Ну и главное: последнее слово остаётся за вами. Две модели, согласившиеся между собой, — это по-прежнему два правдоподобных текста, а не проверенный факт. Подпись под документом ставит человек, и проверяет он.

Все статьи · Курсы и лабораторные работы

Ещё по теме