Безопасность ИИ

Можно ли доверять нейросетям?

Ирина, Пермь 504 просм.

Использую нейросети почти каждый день - для работы, иногда спрашиваю совета по бытовым вопросам. Недавно поймала ChatGPT на явной ошибке в цифрах, и теперь сомневаюсь, насколько вообще можно полагаться на такие ответы. Как понять, где доверять можно, а где стоит перепроверять?

Сергей Орлов специалист по ИИ-безопасности

ответил

эксперт

Доверие здесь стоит делить не на «да» и «нет», а по типу задачи и цене ошибки. Языковая модель не хранит базу проверенных фактов, а предсказывает наиболее вероятное продолжение текста, поэтому она одинаково уверенным тоном пишет и правду, и выдумку — интонация ответа вообще ничего не говорит о его точности.

Для черновиков, идей, структуры текста, брейншторма вариантов доверять можно спокойно, здесь ошибка ничего не стоит, вы все равно дорабатываете результат сами. А вот для конкретных цифр, дат, юридических норм, медицинских рекомендаций или финансовых расчетов ответ нейросети нужно воспринимать как черновую гипотезу, которую обязательно сверяете с первоисточником: сайтом ведомства, инструкцией к лекарству, официальной статистикой.

Отдельно стоит насторожиться в двух случаях: когда речь о недавних событиях (у модели есть дата отсечения знаний, и позже она может достраивать детали) и когда тема узкая или локальная, по которой в интернете мало текстов для обучения — там модель чаще додумывает правдоподобные, но неверные подробности.

Практическая привычка, которая экономит нервы: если ответ содержит цифру, дату или ссылку на закон, попросите модель назвать источник, и уже источник проверяйте отдельно, а не сам ответ. И ни один бесплатный чат-бот в пользовательском соглашении не гарантирует точность ответов, это тоже полезно держать в голове, когда ставки высокие.

Задать свой вопрос

Вопросы проходят модерацию. Ответ эксперта публикуется на сайте в течение пары дней.

Похожие вопросы

Все в теме