GCSA Agent demonstriert autonome Schwachstellenanalyse und PoC-Generierungsfähigkeiten in einem äußerst herausfordernden realen Schwachstellenbenchmark.
Die Global Cybersecurity Alliance (GCSA) gab heute bekannt, dass GCSA Agent eine 91,3% Erfolgsquote im CyberGym-Benchmark erreicht hat, was ihn in die Kategorie von CyberGym’s „Führenden Systemen über 90%“ einordnet.
CyberGym ist ein großangelegtes, reales Evaluierungsframework für Cybersicherheit, das von einem Forschungsteam der University of California, Berkeley, entwickelt wurde. Es enthält 1.507 historische reale Schwachstellentestfälle aus 188 großen Softwareprojekten und ist darauf ausgelegt, die praktischen Fähigkeiten von KI-Agenten in realen Schwachstellenanalyseszenarien zu bewerten.
Im Gegensatz zu traditionellen KI-Benchmarks, die hauptsächlich das Verständnis von Code, wissensbasierte Beantwortung von Fragen oder statische Analysen bewerten, erfordert CyberGym, dass KI-Agenten direkt in realen verwundbaren Codeumgebungen arbeiten.
Im Kern Stufe 1Bewertung erhält ein KI-Agent nur eine Beschreibung der Schwachstelle und ein nicht gepatchtes Code-Repository. Er muss dann autonom eine Code-Analyse durchführen, die Schwachstelle lokalisieren, über potenzielle Angriffswege nachdenken, einen PoC erstellen und diesen zur Validierung ausführen. Eine Aufgabe wird nur dann als erfolgreich angesehen, wenn der generierte PoC die Zielschwachstelle in der verwundbaren Version erfolgreich auslöst, während das Problem in der gepatchten Version nicht reproduziert werden kann.
CyberGym misst daher mehr, als ob ein KI-System einfach „Code verstehen“ kann. Es bewertet, ob die KI den gesamten Prozess von der Sicherheitsanalyse bis zur Reproduktion und Validierung der Schwachstelle abschließen kann.
Von großen Sprachmodellen zu Sicherheitsagenten
In dieser CyberGym-Bewertung arbeitete der GCSA-Agent mit Grok 4.5 und Grok 4.6Modellen und erreichte eine endgültige Erfolgsquote von 91.3%.
Das Ergebnis spiegelt auch einen wichtigen Wandel in der KI-Cybersicherheit wider:
Das zugrunde liegende große Sprachmodell allein bestimmt nicht mehr die endgültigen Sicherheitsfähigkeiten des Systems.
Die Forschung zu Schwachstellen in der realen Welt erfordert typischerweise eine kontinuierliche Abfolge von Aufgaben, einschließlich des Verständnisses von Schwachstellenbeschreibungen, der Durchsuchung großer Codebasen, der Identifizierung von Angriffsflächen, der Formulierung von Hypothesen zu Schwachstellen, der Generierung von Testeingaben, der Ausführung von Programmen, der Analyse von Rückmeldungen und der wiederholten Iteration von PoCs.
Der GCSA-Agent basiert auf einem agentischen Sicherheitsworkflow, der darauf ausgelegt ist, diesen End-to-End-Prozess zu unterstützen.
Ziel ist es nicht nur, ein großes Sprachmodell für die Codeanalyse zu verwenden, sondern KI zu ermöglichen, in realen Ausführungsumgebungen zu operieren, autonom Hypothesen zu Sicherheitsproblemen zu formulieren, Laufzeitevidenz zu sammeln, Tests durchzuführen und letztendlich Sicherheitsbefunde durch reproduzierbare Ergebnisse zu validieren.
Die CyberGym-Bewertung bietet einen quantitativen externen Benchmark für diese Fähigkeiten.
Fähigkeiten zur Schwachstellenforschung für die reale Welt
Ein zentraler Wert von CyberGym liegt darin, die Lücke zwischen traditionellem KI-Testing und der Forschung zur Cybersicherheit in der realen Welt zu schließen.
Die Evaluierungsumgebung stellt Softwareprojekte in ihre anfänglichen, anfälligen Zustände vor dem Patch zurück. Ein KI-Agent muss möglicherweise autonom ein Problem innerhalb einer großen Codebasis identifizieren, die Tausende von Dateien und Millionen von Codezeilen enthält, und letztendlich einen PoC generieren, der tatsächlich die Schwachstelle auslösen kann.
Noch wichtiger ist, dass weitere CyberGym-Forschungen gezeigt haben, dass solche agentischen Sicherheitsfähigkeiten nicht auf die Reproduktion bekannter Schwachstellen beschränkt sind.
In offenen Forschungsversuchen zur Schwachstellenerkennung haben KI-Agenten mehrere zuvor unbekannte Zero-Day-Schwachstellen sowie historische Sicherheitsupdates identifiziert, die die zugrunde liegenden Schwachstellen nicht vollständig behoben haben. Diese Erkenntnisse zeigen das Potenzial autonomer Technologien zur Schwachstellenanalyse, sich von der Reproduktion bekannter Schwachstellen hin zur Entdeckung von Sicherheitslücken in der realen Welt zu entwickeln.
Für GCSA stellt dies eine noch wichtigere Entwicklungsrichtung dar.
Benchmark-Leistung ist nicht das Endziel.
GCSA zielt darauf ab, KI-Sicherheitsagenten weiterzuentwickeln, die in realen Cybersicherheitsumgebungen operieren können und schrittweise am gesamten Sicherheitslebenszyklus teilnehmen, von der Entdeckung und Analyse von Schwachstellen bis hin zur Validierung und anschließenden Behebung.
Aufbau von KI-nativen Cybersicherheitsfähigkeiten
Während künstliche Intelligenz die Softwareentwicklung beschleunigt, transformiert KI auch die Art und Weise, wie Schwachstellen erforscht und Cyberbedrohungen angegangen werden.
Da Software Systeme weiterhin in Umfang und Komplexität wachsen, wird die nächste Generation der Cybersicherheit zunehmend von der Zusammenarbeit zwischen menschlichen Sicherheitsexperten und autonomen KI-Agenten abhängen.
KI-Sicherheitsagenten haben das Potenzial, Sicherheitsteams zu unterstützen:
- Identifizieren Sie Softwareanfälligkeiten mit echtem Ausnutzungspotenzial in einem früheren Stadium;
- Automatisch komplexe Angriffswege über große Codebasen analysieren;
- Automatisch PoCs generieren und die Validierung von Anfälligkeiten auf Ausführungsebene durchführen;
- Falsche Positivmeldungen in der traditionellen Sicherheitsüberwachung durch echte Ausführungsergebnisse reduzieren;
- Die Bewertung, Validierung und Behebung von Anfälligkeiten beschleunigen;
- Den Umfang der Software und Systeme erweitern, die spezialisierte Sicherheitsteams abdecken können.
GCSA-Agent’s 91,3% Punktzahl bei CyberGymstellt einen wichtigen Meilenstein in der Entwicklung von KI-nativen Cybersicherheitsfähigkeiten von GCSA dar.
In Zukunft wird GCSA weiterhin die Forschung zu autonomer Anfälligkeitsanalyse, KI-Sicherheitsagenten und intelligenten Cybersicherheitstechnologien vorantreiben, um die fortschrittlichen KI-Fähigkeiten in reale Sicherheitsfähigkeiten zu übersetzen und technische Unterstützung für eine sicherere, vertrauenswürdigere und widerstandsfähigere digitale Umgebung zu bieten.
Quelle:GCSA Globale Cybersecurity-Allianz
Offizielle Webseite: www.gcsa.org
Quelle: BeInCrypto
