Безопасность ИИ

Сэм Олтман призывает замедлить темпы развития ИИ, разжигая дебаты в отрасли

Глава OpenAI, ранее известный как активный сторонник быстрого прогресса, публично заявил о необходимости сознательного замедления темпов развития искусственного интеллекта, ссылаясь на растущие риски.

Иллюстрация к новости: Сэм Олтман призывает замедлить темпы развития ИИ, разжигая дебаты в отрасли

Генеральный директор OpenAI Сэм Олтман призвал индустрию искусственного интеллекта сознательно замедлить темпы разработки. Этот призыв от одного из главных сторонников быстрого прогресса в ИИ означает заметный идеологический поворот. Компания Олтмана создала известные модели, но теперь он выступает за сдержанность, ссылаясь на растущие риски стремительного развития.

Олтман выразил озабоченность не только технической безопасностью, но и социальными, экономическими и геополитическими последствиями. Он считает, что новые мощные модели выпускаются быстрее, чем общество, регуляторы и сами разработчики успевают оценить их воздействие. Речь идет о рисках дезинформации, автоматизации рабочих мест, кибербезопасности и потере контроля над продвинутыми системами. Его призыв - это аргумент за установление новых отраслевых норм и регуляторных рамок, определяющих темпы инноваций.

Этот поворот происходит на фоне растущего глобального давления на компании в сфере ИИ. Регуляторы в разных странах активно работают над правилами для этой области. Призыв Олтмана можно расценить как стратегический шаг: индустрия может установить собственные стандарты, прежде чем это сделают государственные органы более жесткими методами. Для крупных игроков рынка это баланс между конкурентным преимуществом и ожиданиями общества в отношении ответственности. Дебаты между сторонниками ускоренного прогресса и сторонниками осторожности становятся все острее, и заявление Олтмана придает им новый импульс.

Для разработчиков и предпринимателей в сфере ИИ это может изменить подход к работе. В краткосрочной перспективе возможен более тщательный внутренний аудит, увеличение внимания к командам по безопасности и более осторожный выпуск экспериментальных функций. В долгосрочной - формирование неформальных ограничений для тренировки крупных моделей или добровольные паузы в некоторых исследованиях. Для пользователей и бизнесов это может означать более предсказуемую и безопасную экосистему, но и потенциальное замедление появления новых возможностей. Ключевой вопрос в том, может ли индустрия, построенная на быстром росте, развиваться ответственно, или для этого необходим внешний контроль. Ответ определит траекторию развития ИИ на ближайшие годы.

Вопросы читателей по теме

Все вопросы

Что такое галлюцинация в работе нейросети?

спрашивает Павел, Казань 308 просм.

Дмитрий Волков: Да, это она. Языковая модель - авторегрессионный предсказатель следующего токена: она обучена продолжать текст статистически правдоподобно, а не сверяться с базой проверенных фактов. Если в промпте или в контексте, который вы ей передали, точного значения характеристики нет, модель всё равно достраивает связный ответ, потому что это её единственная задача - выдать вероятное продолжение. Отличить такой…

Что такое дипфейк простыми словами?

спрашивает Николай, Новосибирск 389 просм.

Марина Соколова: Дипфейк - это не обычный монтаж, а видео или запись голоса, которую создала нейросеть, обучившись копировать конкретного человека. Программе показывают много фотографий и записей голоса этого человека, она запоминает черты лица, мимику, манеру говорить, а затем накладывает это на другое видео или сочиняет новую речь, которую человек никогда не произносил. Раньше такое умели делать только…

Можно ли доверять нейросетям?

спрашивает Ирина, Пермь 510 просм.

Сергей Орлов: Доверие здесь стоит делить не на "да" и "нет", а по типу задачи и цене ошибки. Языковая модель не хранит базу проверенных фактов, а предсказывает наиболее вероятное продолжение текста, поэтому она одинаково уверенным тоном пишет и правду, и выдумку - интонация ответа вообще ничего не говорит о его точности. Для черновиков, идей, структуры текста, брейншторма…

Что такое дипфейки?

спрашивает Екатерина, Новосибирск 510 просм.

Марина Соколова: Дипфейк - это видео, фото или аудиозапись, где нейросеть подменяет лицо, мимику или голос человека на синтетические, обученные так, чтобы выглядеть настоящими. Для этого сети показывают десятки или сотни фотографий и записей голоса конкретного человека, она учится воспроизводить его черты и интонации, а затем накладывает это на исходное видео или генерирует новую речь с нуля.…