Безопасность ИИ

Google свернул ИИ-инструмент для создания изображений в Google Earth через день после запуска

Экспериментальная функция, позволявшая генерировать ИИ-изображения поверх реальных карт, была отключена после волны критики о рисках дезинформации.

Иллюстрация к новости: Google свернул ИИ-инструмент для создания изображений в Google Earth через день после запуска

Google быстро отключил экспериментальную функцию ИИ в Google Earth вскоре после ее запуска. Инструмент давал возможность генерировать изображения и накладывать их на спутниковые карты. По данным некоторых изданий, это вызвало критику: эксперты и пользователи указали на риски, связанные с дезинформацией. Возможности для злоупотребления выглядели очевидными - можно было создавать визуально правдоподобные изображения несуществующих объектов в реальных местах.

Функцию представили как эксперимент, но связанные с ней риски, по-видимому, не были в полной мере учтены. Инструмент предоставлял механизм для создания контекстуальных фальсификаций, которые было бы трудно отличить от реальных снимков. Это могло превратить Google Earth из инструмента для изучения мира в платформу для симуляции альтернативной реальности.

Данный случай иллюстрирует противоречие между быстрым развитием генеративных технологий и ответственностью крупных технологических компаний. Google активно внедряет ИИ в свои продукты, но даже, на первый взгляд, безобидные креативные инструменты в области картографии могут нести системные риски. Ситуация демонстрирует растущую чувствительность как публики, так и экспертов к потенциальным угрозам, которые ИИ представляет для сфер, связанных с информацией о реальном мире - таких как картография, новости или исторические данные. Компании, вероятно, столкнутся с необходимостью пересмотреть практику запуска подобных функций в режиме, который можно охарактеризовать как "посмотрим, что получится".

Для отрасли этот инцидент может стать сигналом. Он способен повлиять на разработку и выпуск новых функций ИИ, связанных с геоданными и визуальным контентом. Вероятно, последуют более строгие внутренние проверки, более длительные этапы тестирования с привлечением специалистов по безопасности и этике, а также более осторожный подход к релизам экспериментальных возможностей. Инцидент также подчеркивает роль общественного давления как фактора, способного заставить крупные корпорации оперативно корректировать свои решения. В долгосрочной перспективе это может способствовать более сдержанному подходу к интеграции генеративного ИИ в инфраструктуры, критически важные для распространения знаний, и стимулировать дискуссии о возможном регулировании со стороны государственных органов.

Вопросы читателей по теме

Все вопросы

Что такое галлюцинация в работе нейросети?

спрашивает Павел, Казань 308 просм.

Дмитрий Волков: Да, это она. Языковая модель - авторегрессионный предсказатель следующего токена: она обучена продолжать текст статистически правдоподобно, а не сверяться с базой проверенных фактов. Если в промпте или в контексте, который вы ей передали, точного значения характеристики нет, модель всё равно достраивает связный ответ, потому что это её единственная задача - выдать вероятное продолжение. Отличить такой…

Что такое дипфейк простыми словами?

спрашивает Николай, Новосибирск 389 просм.

Марина Соколова: Дипфейк - это не обычный монтаж, а видео или запись голоса, которую создала нейросеть, обучившись копировать конкретного человека. Программе показывают много фотографий и записей голоса этого человека, она запоминает черты лица, мимику, манеру говорить, а затем накладывает это на другое видео или сочиняет новую речь, которую человек никогда не произносил. Раньше такое умели делать только…

Можно ли доверять нейросетям?

спрашивает Ирина, Пермь 510 просм.

Сергей Орлов: Доверие здесь стоит делить не на "да" и "нет", а по типу задачи и цене ошибки. Языковая модель не хранит базу проверенных фактов, а предсказывает наиболее вероятное продолжение текста, поэтому она одинаково уверенным тоном пишет и правду, и выдумку - интонация ответа вообще ничего не говорит о его точности. Для черновиков, идей, структуры текста, брейншторма…

Что такое дипфейки?

спрашивает Екатерина, Новосибирск 510 просм.

Марина Соколова: Дипфейк - это видео, фото или аудиозапись, где нейросеть подменяет лицо, мимику или голос человека на синтетические, обученные так, чтобы выглядеть настоящими. Для этого сети показывают десятки или сотни фотографий и записей голоса конкретного человека, она учится воспроизводить его черты и интонации, а затем накладывает это на исходное видео или генерирует новую речь с нуля.…