Перейти к содержимому
Лекция
#1.49

Угрозы и уязвимости агентных систем / А.Кокуйкин

Текущее состояние агентных систем и их отличия от LLM

  • Память как ключевая особенность агентов - системы сохраняют информацию о пользователях на длительный срок (00:00)
  • Архитектурная сложность мультиагентных систем превосходит традиционные решения (05:32)

Типология агентов и специфические риски

  • Коллаборативные агенты типа Cursor работают в тесном взаимодействии с пользователем (10:48)
  • Фоновые агенты работают автономно с почтой, CRM, базами данных (10:48)
  • Долгосрочные агенты могут работать неделями над сложными задачами (12:19)

Каталог угроз агентных систем OWASP

  • OWASP Agentic Security Initiative документирует 17-20 различных типов угроз (14:00)
  • Межагентная коммуникация создает риски каскадного распространения ошибок (14:00)

Практические атаки и защитные меры

  • Prompt-инъекции остаются основным вектором атак на агентные системы (17:21)
  • Внешние классификаторы предоставляют дополнительный уровень защиты (18:49)

Supply Chain атаки в эпоху агентов

  • Расширение поверхности атак через автоматический выбор библиотек и инструментов (24:23)
  • Реальный инцидент демонстрирует серьезность угрозы (27:37)

Инциденты безопасности агентных систем

  • Случай с Replit агентом показал риски автономного управления инфраструктурой (29:05)

Вызовы в обеспечении безопасности

  • Human-in-the-loop становится сложной инженерной задачей (32:16)
  • Дискуссия об AI-агентах для безопасности остается открытой (32:16)

Эволюция ландшафта кибербезопасности

  • Gartner выделяет три грани AI-безопасности: использование, защита и атака (33:57)
  • Автоматизация кибератак снижает барьеры для злоумышленников (35:41)

Практические рекомендации по внедрению

  • Создание AI-Security команд становится необходимостью для крупных корпораций (37:44)
  • Оценка рисков должна предшествовать внедрению агентных систем (39:04)

Передовые практики разработки безопасных агентов

  • Методология безопасной работы с Cursor включает строгие спецификации (42:27)
  • Двойной контур безопасности обеспечивает надежную защиту (44:22)
Видеозапись

Доступно участникам клуба

Записи всех встреч — внутри клуба

Подать заявку