LLM

Как проверить, написан ли текст с помощью ChatGPT?

Николай, Липецк 198 просм.

Получил на проверку отчет от подрядчика, и закралось подозрение, что писал не человек, а ChatGPT. Прогнал текст через один из онлайн-детекторов, он выдал 80 процентов "ИИ". Можно ли на это полагаться?

Сергей Орлов специалист по ИИ-безопасности

ответил

эксперт

На такой процент полагаться нельзя, и вот почему. Детекторы ИИ-текста работают статистически: они ищут ровный ритм предложений, предсказуемый набор слов и низкую вариативность стиля. Проблема в том, что так же пишут аккуратные, начитанные люди, а неносители языка или те, кто писал под сильным дедлайном, вообще регулярно попадают в ложные срабатывания. Ни один публичный детектор не дает надежной цифры, и OpenAI в свое время сама закрыла собственный сервис проверки именно из-за низкой точности.

Что действительно работает лучше процента от детектора:

  • смотрите на специфику, которую сложно придумать: реальные цифры из внутренних систем, имена коллег, детали конкретного проекта — модель их не знает и обычно сглаживает такие места общими фразами;
  • проверяйте внутреннюю логику текста, а не только стиль — ИИ-тексты чаще спотыкаются на причинно-следственных связях между абзацами, чем на грамматике;
  • попросите автора устно объяснить два-три места из текста своими словами — если писал он сам, разница между письменным и устным изложением будет небольшой.

Если результат важен формально, например для учебной работы, ориентируйтесь на правила конкретного учреждения и используйте официально принятый там инструмент, а не первый попавшийся сайт. Для рабочих отчетов честнее спросить у подрядчика напрямую, использовал ли он ИИ, и договориться на будущее, в каком виде это допустимо: как черновик под правку человека или вообще без ограничений, если результат проверяется по факту.

Задать свой вопрос

Вопросы проходят модерацию. Ответ эксперта публикуется на сайте в течение пары дней.

Похожие вопросы

Все в теме