Тег

безопасность ИИ

Безопасность ИИ

Исследователи взломали ИИ-агента через PNG-файл, заставив его выдать пароли

Новая атака prompt injection скрыла вредоносную инструкцию внутри изображения, обойдя базовые защиты и вызвав утечку конфиденциальных данных, что вскрыло фундаментальные уязвимости мультимодальных…

Алексей Нейролентов 13 Июл2 мин
Безопасность ИИ

Административный рубильник для ИИ: как США впервые принудительно отключили модель Fable 5

Правительство США впервые использовало административный механизм для глобального принудительного отключения ИИ-модели Anthropic Fable 5, создав юридический прецедент, который остаётся в силе даже…

Алексей Нейролентов 12 Июл2 мин
Безопасность ИИ

Карта грантов и фондов по AI safety обновлена на лето-осень 2026

Актуализированная карта грантов, фондов и программ для финансирования исследований в области безопасности ИИ поможет специалистам системно находить источники поддержки в быстро меняющейся…

Алексей Нейролентов 5 Июл2 мин
LLM

OpenAI исследует ‘демонологию’ ИИ: почему языковые модели порождают гоблинов и призраков

Компания OpenAI опубликовала исследование, объясняющее, почему её языковые модели иногда генерируют фантастические сущности вроде гоблинов, и как это связано с 'глубинной психологией'…

Алексей Нейролентов 28 Июн2 мин
Безопасность ИИ

Сотрудники Meta предупреждают о рисках из-за ускоренного внедрения ИИ для модерации

Внутренние источники в Meta выражают обеспокоенность темпами автоматизации модерации контента с помощью больших языковых моделей, опасаясь роста ошибок и потери контроля.

Алексей Нейролентов 25 Июн1 мин
Безопасность ИИ

От удаления баз до незаконных советов: почему публичные бенчмарки не защитят от провалов AI-агентов

Серия громких инцидентов с AI-агентами, от удаления продакшен-базы до самовольных покупок, обнажила критический пробел: стандартные тесты неспособны выявить реальные риски развертывания. Эксперты…

Алексей Нейролентов 23 Июн2 мин
Безопасность ИИ

Anthropic о безопасности агентов: критика методологии и упущенные риски

Новое исследование Anthropic о безопасности LLM-агентов подверглось критике за избирательный подход и некорректные сравнения, что ставит под сомнение практическую ценность их выводов.

Алексей Нейролентов 13 Июн2 мин
Безопасность ИИ

Власти США принудительно отозвали самую мощную модель Anthropic из-за уязвимости

Федеральные регуляторы США впервые отозвали широко используемую коммерческую модель ИИ - самую мощную систему компании Anthropic - из-за выявленной уязвимости, позволяющей обойти…

Алексей Нейролентов 13 Июн1 мин