AI-агентам теперь нужен аварийный выключатель. И это многое говорит о будущем корпоративной безопасности.

Сегодня CrowdStrike представила AI Kill Switch для Falcon Guardian — механизм, позволяющий в реальном времени останавливать несанкционированную активность AI-агентов.

На первом этапе блокировка реализуется на уровне AI-шлюза.

Возможность принудительного завершения работы агентов непосредственно на конечных устройствах планируется добавить позднее.

Но самое интересное здесь не сама кнопка экстренной остановки, а архитектурная проблема, которую она призвана решить.

Традиционные системы безопасности строились вокруг пользователей, процессов, приложений и сетевых соединений. Автономные AI-агенты добавляют новый уровень сложности: программные системы, способные самостоятельно интерпретировать инструкции, выбирать инструменты, выполнять команды и выстраивать последовательности действий без постоянного участия человека.

При этом агент может использовать совершенно легитимные учётные данные и всё равно совершать недопустимые действия. Успешная аутентификация ещё не означает, что каждое последующее действие авторизовано и соответствует первоначальному намерению пользователя. Это меняет подход к построению защиты.

Компаниям становится необходимо сопоставлять инструкции агента с вызовами инструментов, используемыми идентификаторами, сетевой активностью и фактическим выполнением операций. А механизмы контроля должны работать непосредственно во время исполнения, а не только при входе в систему или развёртывании приложения.

Анонс CrowdStrike — хороший пример того, как развивается эта архитектура. Однако надёжно отличать нежелательные действия от легитимных, не нарушая работу автоматизированных процессов, по-прежнему остаётся сложной инженерной задачей.

На мой взгляд, контроль доступа во время исполнения (runtime authorization), управление идентичностями AI-агентов и наблюдаемость их действий постепенно станут обязательными компонентами корпоративной AI-инфраструктуры.

Следующий этап развития AI — не только научить агентов выполнять всё более сложные задачи, но и обеспечить возможность контролировать, что именно они делают.

#ArtificialIntelligence #Cybersecurity #AISecurity #AgenticAI #EnterpriseSecurity

AI-агентам теперь нужен аварийный выключатель. И это многое говорит о будущем корпоративной безопасности | Сетка — социальная сеть от hh.ru AI-агентам теперь нужен аварийный выключатель. И это многое говорит о будущем корпоративной безопасности | Сетка — социальная сеть от hh.ru