Безопасность ИИ

Лидеры ИИ-индустрии требуют от Конгресса США ввести обязательную проверку заказов на синтетическую ДНК

Сэм Олтман, Дарио Амодеи и Демис Хассабис предупреждают, что ИИ уже превосходит вирусологов в лабораторных процедурах, что резко снижает барьер для создания биологического оружия.

Иллюстрация к новости: Лидеры ИИ-индустрии требуют от Конгресса США ввести обязательную проверку заказов на синтетическую ДНК

Лидеры технологической индустрии обратились к Конгрессу США с требованием регулировать синтетическую биологию. Они указывают, что современные системы ИИ уже способны инструктировать непрофессионалов в сложных вирусологических процедурах. По данным The Decoder, в некоторых лабораторных задачах ИИ превосходит вирусологов с PhD. Это резко снижает порог входа в создание опасных биологических агентов - знания, доступные раньше лишь узким специалистам, теперь могут быть использованы злоумышленниками.

Главное законодательное предложение - ввести обязательную проверку всех заказов на синтетическую ДНК. Сейчас отрасль работает на добровольных принципах биобезопасности, не имеющих силы закона. Технологические руководители считают, что саморегулирования недостаточно в эпоху, когда ИИ может проектировать патогены или искать способы обойти существующие протоколы проверки. Коммерчески доступные ИИ-модели, включая языковые, могут служить тренерами для лиц без образования, желающих проводить опасные биологические эксперименты.

Ситуация - пример двойного использования технологии: инструмент для блага, ускоряющий медицинские исследования, одновременно создает новые векторы угроз. Риск не только в том, что ИИ спроектирует патоген, но и в том, что система сможет пошагово инструктировать, как его синтезировать, культивировать и тестировать. По данным The Decoder, именно способность ИИ коучить любителей делает угрозу острой и требующей немедленного внимания регуляторов. В 2023 году эта проблема стала особенно актуальной. Технологические руководители подчеркивают, что в условиях, когда ИИ может обучать непрофессионалов, добровольные меры безопасности, такие как проверка заказов на синтетическую ДНК, недостаточны. Они требуют законодательных действий от Конгресса.

Вопросы читателей по теме

Все вопросы

Что такое галлюцинация в работе нейросети?

спрашивает Павел, Казань 308 просм.

Дмитрий Волков: Да, это она. Языковая модель - авторегрессионный предсказатель следующего токена: она обучена продолжать текст статистически правдоподобно, а не сверяться с базой проверенных фактов. Если в промпте или в контексте, который вы ей передали, точного значения характеристики нет, модель всё равно достраивает связный ответ, потому что это её единственная задача - выдать вероятное продолжение. Отличить такой…

Что такое дипфейк простыми словами?

спрашивает Николай, Новосибирск 389 просм.

Марина Соколова: Дипфейк - это не обычный монтаж, а видео или запись голоса, которую создала нейросеть, обучившись копировать конкретного человека. Программе показывают много фотографий и записей голоса этого человека, она запоминает черты лица, мимику, манеру говорить, а затем накладывает это на другое видео или сочиняет новую речь, которую человек никогда не произносил. Раньше такое умели делать только…

Можно ли доверять нейросетям?

спрашивает Ирина, Пермь 510 просм.

Сергей Орлов: Доверие здесь стоит делить не на "да" и "нет", а по типу задачи и цене ошибки. Языковая модель не хранит базу проверенных фактов, а предсказывает наиболее вероятное продолжение текста, поэтому она одинаково уверенным тоном пишет и правду, и выдумку - интонация ответа вообще ничего не говорит о его точности. Для черновиков, идей, структуры текста, брейншторма…

Что такое дипфейки?

спрашивает Екатерина, Новосибирск 510 просм.

Марина Соколова: Дипфейк - это видео, фото или аудиозапись, где нейросеть подменяет лицо, мимику или голос человека на синтетические, обученные так, чтобы выглядеть настоящими. Для этого сети показывают десятки или сотни фотографий и записей голоса конкретного человека, она учится воспроизводить его черты и интонации, а затем накладывает это на исходное видео или генерирует новую речь с нуля.…