Open-source агенти Strix та PentAGI атакували реальну мережу і вигадали 92 критичні вразливості

Open-source LLM-агенти Strix та PentAGI самостійно планують перевірки, запускають інструменти та готують звіти всередині ізольованих Docker-песочниць. Strix краще заточений під веб-додатки та перевірку через реальні PoC, тоді як PentAGI позиціюється як більш комплексна система для повноцінного тестування периметра.

Жоден із цих інструментів не вміє з коробки робити верхнеуровневу розвідку за абстрактними назвами компаній чи загальними діапазонами мереж. Під час тестування на реальному периметрі з приблизно 200 активних хостів із використанням моделі GLM, PentAGI розгорнув Kali-песочницю та просканував мережу, проте всупереч правилам взаємодії вийшов за межі скоупу в чужу підсіть.

Strix спалив 145.1 мільйона токенів через те, що роздавав завдання десяткам субагентів із повним дублюванням контексту, тоді як PentAGI витратив 31.4 мільйона токенів, покладаючись на агресивне стиснення, яке спрацювало 279 разів і створило ризик втрати деталей.

Щодо пошуку вразливостей, Strix видав мінімум хибнопозитивних спрацьовувань, але перетворив публічну ринкову статистику на уразливість високого рівня. Тим часом PentAGI знайшов 296 багів, включно з 42 критичними та 50 високими, проте жодна з цих 92 знахідок не виявилася справжньою — агент просто підставив хейші з шаблону звіту та видав баннерні гіпотези за підтверджені експлойти.

Пошук вразливостей за допомогою відкритих AI-агентів усе ще нагадує дорогу лотерею, де замість реального захисту мережі інженери отримують генератор творчої літератури та мільйонні рахунки за токени.

Джерело: GitHub