Безопасность ИИ

ИИ-рекрутинг создаёт собственные предубеждения, а не просто копирует человеческие

Новое исследование показывает, что большие языковые модели при отборе резюме могут генерировать новые, непредсказуемые предубеждения, а не просто воспроизводить искажения из обучающих данных.

Иллюстрация к новости: ИИ-рекрутинг создаёт собственные предубеждения, а не просто копирует человеческие

Искусственный интеллект, призванный сделать найм объективным, сам создает новые предубеждения. Исследование MIT Technology Review показало: большие языковые модели для скрининга резюме не просто копируют человеческие предрассудки. Они активно генерируют новые, часто неожиданные искажения в процессе принятия решений. Даже если очистить обучающие данные от явной дискриминации, система может стать непредсказуемо предвзятой, создавая собственные алгоритмы отбора.

Эксперименты выявили тревожный феномен. При отборе кандидатов модели формируют предпочтения на основе тонких, неочевидных паттернов. Например, система может связать определенные формулировки или структуру документа с желаемым результатом, создавая "синтетические" предубеждения. Этот процесс происходит внутри "черного ящика" модели и не контролируется инженерами напрямую. Анализ поведения моделей на 8230 резюме показал: LLM способны не только усиливать существующие искажения, но и генерировать собственные.

Это открытие разрушает ключевую надежду на внедрение ИИ в управление персоналом. Раньше главной проблемой считался принцип "мусор на входе - мусор на выходе": очистка данных должна была обеспечить объективность. Но LLM действуют как активные ученики, которые не просто запоминают, но и обобщают, иногда в опасном направлении. Система становится источником новых, трудно предсказуемых рисков.

Для отрасли это означает, что стандартные методы аудита моделей на предвзятость, ищущие известные человеческие предрассудки, теперь недостаточны. Требуются новые подходы, способные отслеживать самостоятельное, эмерджентное поведение модели. Последствия для пользователей серьезны. Компании, полагающиеся на "объективный" ИИ-скрининг, сталкиваются с юридическими и репутационными рисками, если их система дискриминирует кандидатов по новым, неучтенным критериям.

Для соискателей это означает зависимость их шансов от непрозрачных алгоритмов, чье предвзятое поведение возникло в процессе "обучения". Это подрывает доверие к автоматизированному найму. Тенденция ведет к необходимости более жесткого регулирования. От разработчиков могут потребовать не только раскрывать данные для обучения, но и предоставлять отчеты о том, как модель принимает решения и какие новые паттерны создает. Будущее этичного ИИ в найме теперь зависит от способности отрасли создать инструменты для контроля как за известными, так и за возникающими в процессе работы предубеждениями.

Вопросы читателей по теме

Все вопросы

Что такое галлюцинация в работе нейросети?

спрашивает Павел, Казань 326 просм.

Дмитрий Волков: Да, это она. Языковая модель - авторегрессионный предсказатель следующего токена: она обучена продолжать текст статистически правдоподобно, а не сверяться с базой проверенных фактов. Если в промпте или в контексте, который вы ей передали, точного значения характеристики нет, модель всё равно достраивает связный ответ, потому что это её единственная задача - выдать вероятное продолжение. Отличить такой…

Что такое дипфейк простыми словами?

спрашивает Николай, Новосибирск 400 просм.

Марина Соколова: Дипфейк - это не обычный монтаж, а видео или запись голоса, которую создала нейросеть, обучившись копировать конкретного человека. Программе показывают много фотографий и записей голоса этого человека, она запоминает черты лица, мимику, манеру говорить, а затем накладывает это на другое видео или сочиняет новую речь, которую человек никогда не произносил. Раньше такое умели делать только…

Можно ли доверять нейросетям?

спрашивает Ирина, Пермь 521 просм.

Сергей Орлов: Доверие здесь стоит делить не на "да" и "нет", а по типу задачи и цене ошибки. Языковая модель не хранит базу проверенных фактов, а предсказывает наиболее вероятное продолжение текста, поэтому она одинаково уверенным тоном пишет и правду, и выдумку - интонация ответа вообще ничего не говорит о его точности. Для черновиков, идей, структуры текста, брейншторма…

Что такое дипфейки?

спрашивает Екатерина, Новосибирск 523 просм.

Марина Соколова: Дипфейк - это видео, фото или аудиозапись, где нейросеть подменяет лицо, мимику или голос человека на синтетические, обученные так, чтобы выглядеть настоящими. Для этого сети показывают десятки или сотни фотографий и записей голоса конкретного человека, она учится воспроизводить его черты и интонации, а затем накладывает это на исходное видео или генерирует новую речь с нуля.…