ИИ-агенты могут передавать вредоносные команды друг другу и открывать доступ к данным
Злоумышленники могут использовать доверие между ИИ-агентами, чтобы распространять вредоносные инструкции и заставлять системы обращаться к закрытым сервисам. Такой сценарий описал независимый исследователь безопасности Сайед Анас Мохиуддин, сообщает Ars Technica. ИИ-агенты — это…
- 01.Злоумышленники могут использовать доверие между ИИ-агентами, чтобы распространять вредоносные инструкции и заставлять системы обращаться к закрытым сервисам
- 02.Такой сценарий описал независимый исследователь безопасности Сайед Анас Мохиуддин, сообщает Ars Technica
- 03.ИИ-агенты — это…

Злоумышленники могут использовать доверие между ИИ-агентами, чтобы распространять вредоносные инструкции и заставлять системы обращаться к закрытым сервисам. Такой сценарий описал независимый исследователь безопасности Сайед Анас Мохиуддин, сообщает Ars Technica. ИИ-агенты — это программы, которые могут выполнять задачи с помощью внешних инструментов: например, искать информацию или работать с базами данных. Для подключения таких инструментов используют протокол MCP. Атака может начаться с вредоносной инструкции, спрятанной в документе или другом материале. Один агент читает ее и передает другому как обычное рабочее задание. Второй доверяет первому и выполняет команду злоумышленника. Если подключенный инструмент плохо защищен, это может заставить сервер обратиться к закрытым ресурсам компании. В результате возникает риск доступа к внутренним сервисам и конфиденциальным данным. По словам Мохиуддина, похожие уязвимости подтвердили и исправили в проектах Google, JPMorgan Chase, Weaviate, французской цифровой службы DINUM и администрации индонезийского города Тангеранг. Исследователь также сообщил о возможных проблемах в пяти системах для федеральных ведомств США. На момент публикации его отчета эти сообщения еще проверялись. Одну из наиболее серьезных ошибок нашли в инструменте Google для работы с базами данных. Ее опасность оценили в 8 из 10. Сервер мог переходить по подставленным адресам и отправлять запросы к внутренним ресурсам. Google исправила проблему, добавив проверки адресов и ограничения доступа. В инструменте компании Rapid7 обнаружили другую ошибку: непроверенные данные позволяли менять запросы к сервису. Ее оценили в 2,7 из 10 и также исправили. При этом ошибка не давала доступа за пределами прав используемого аккаунта. Исследователь рекомендует проверять запросы ИИ-агентов и ограничивать доступ инструментов к внутренним ресурсам. Даже если команду передает другая программа внутри компании, это еще не означает, что она безопасна.The post ИИ-агенты могут передавать вредоносные команды друг другу и открывать доступ к данным appeared first on Kursiv Media Казахстан.
Связанные материалы
Все материалы →Исследователи обнаружили шесть закономерностей, из-за которых текст ИИ так утомительно читать
Исследование Нью-Йоркского университета и Техасского университета в Остине показывает, что модели пограничных языков систематически злоупотребляют лингвистическими шаблонами, которые людям трудно проанализировать. Исследователи связывают проблему с обучением программированию и математике, где правильность становится...
RealReal не позволит агентам ИИ забирать дизайнерскую одежду
RealReal, розничный торговец подержанной модной одеждой класса люкс, заявил, что обновляет свою систему защиты от ботов, что фактически усложняет агентам искусственного интеллекта совершение покупок на ее сайте. Изменение произошло через несколько дней после того, как издание The Verge сообщило, что для использования возможностей The…
R/opensource Reddit запрещает все проекты, связанные с искусственным интеллектом, что вызывает негативную реакцию и появление конкурирующего субреддита.
Форум Reddit r/opensource запретил все публикации о проектах ИИ, независимо от того, созданы ли они с использованием ИИ, на базе ИИ или предназначены для ИИ. Проекты также должны быть не моложе года и иметь нескольких участников. Сообщения на языках, написанных не на английском языке, также исключаются. В ответ конкурирующий форум…