AWS открыла доступ к ИИ-агенту Continuum для поиска и исправления уязвимостей
Изображение: OpenAI
AWS 22 октября открыла общий доступ к Continuum, ИИ-агенту для поиска и исправления уязвимостей в коде. По данным компании, агент выполнил 89% заданий в тесте CyberGym-E2E при прежнем лучшем публичном результате 65,9%.
При этом конкретную ранее известную уязвимость, выбранную для проверки, Continuum исправил в 37,8% заданий, тогда как прежний лучший публичный результат составлял 26,2%. Агенту не сообщали, какую именно ошибку нужно устранить. Основной результат засчитывался и тогда, когда агент находил и исправлял другую реальную уязвимость в том же репозитории.
Сервис ищет и подтверждает уязвимости в репозиториях, сопоставляет находки с инфраструктурой клиента в AWS и создаёт pull request с предложенными исправлениями.
AWS проверила агента на 920 заданиях из 139 проектов с открытым исходным кодом. Все задания касались уязвимостей при работе с памятью в коде на C или C++; другие языки и типы уязвимостей тест не охватывал. За 90 минут агент должен был самостоятельно найти и воспроизвести уязвимость, а затем подготовить исправление, которое устраняет сбой и не ломает существующие тесты проекта.
Испытание провела сама AWS: по её словам, агент соблюдал правила теста, включая ограничения доступа в интернет, и не искал уже опубликованные исправления. Независимого подтверждения этих результатов пока нет. Как отмечает The New Stack, остаётся неизвестным, насколько хорошо Continuum справляется с исправлением конкретной уязвимости, которую ему указала команда разработчиков.
