San Francisco – Es ist ein Vorfall wie aus einem Science-Fiction-Thriller, aber er ist real: Beim Testlauf neuer KI-Modelle des ChatGPT-Giganten OpenAI ist das Risiko von Cyberattacken mit Künstlicher Intelligenz erschreckend deutlich geworden. Die Software drang eigenständig in Computersysteme einer anderen KI-Firma ein und verhielt sich wie ein gewiefter Hacker. Das geht aus einem Blogeintrag von OpenAI hervor.
KI bricht aus Testumgebung aus
Das betroffene Unternehmen Hugging Face, eine Plattform für KI-Anwendungen, berichtete bereits vergangene Woche von einem Cyberangriff mit Hilfe Künstlicher Intelligenz. Nun stellt sich heraus, dass dieser auf einen internen Versuch bei OpenAI zurückging, bei dem die Software eigenmächtig viel weiter ging als geplant.
OpenAI wollte laut dem Blogeintrag beim neuen Modell GPT-5.6 Sol und einer noch unveröffentlichten künftigen Version die Fähigkeit ausloten, Sicherheitslücken für Cyberattacken auszunutzen. Dafür sollte die Software Aufgaben eines Standard-Tests mit dem Namen ExploitGym lösen, der oft in der Branche verwendet wird. Doch die KI-Modelle gingen viel weiter als erwartet, um die Aufgabe zu erfüllen.
Eigenständiger Zugriff auf das offene Internet
Zunächst brach die Software aus der Testumgebung aus, indem sie sich auf eigene Faust Zugang zum offenen Internet verschaffte – und zwar über eine bisher unentdeckt gebliebene Schwachstelle. Während die Modelle eigenständig im Netz unterwegs waren, kamen sie zu dem Schluss, dass es bei Hugging Face nützliche Daten und Lösungen für die ExploitGym-Aufgaben geben könnte. Deshalb habe die Software sich Zugang zu „geheimen Informationen“ auf der Plattform verschafft, mit denen sie beim ExploitGym-Test schummeln könnte, so OpenAI.
Dafür setzte die OpenAI-Software unter anderem auf zuvor unentdeckte Sicherheitslücken – aber auch auf gestohlene Zugangsdaten. Hugging Face zufolge führte der KI-Angreifer Tausende Schritte aus und verschleierte die Herkunft des Angriffs, indem sie mehrfach den Server wechselte. OpenAI selbst spricht von einem „beispiellosen Cyber-Zwischenfall“.
Experten warnen vor KI-Cyberangriffen
Experten warnen schon lange vor Cyberattacken mit KI-Software. In den vergangenen Monaten heizte vor allem ein neues Modell des OpenAI-Rivalen Anthropic die Debatte an. Die Software mit dem Namen Mythos entdeckte über Jahrzehnte unentdeckt gebliebene Sicherheitslücken bei viel genutzten Programmen und Online-Diensten. Die Schwachstellen konnten in der Folge gestopft werden. Doch zugleich führte das vor Augen, dass solche KI in den falschen Händen als verheerende Cyberwaffe dienen kann.
Anthropic macht die vollen Möglichkeiten von Mythos nur für ausgewählte Behörden und Unternehmen zugänglich. Für andere gibt es eine abgespeckte Version mit dem Namen Fable, bei der unter anderem die Cybersicherheitsfähigkeiten fehlen. Nach Warnungen vor einem möglichen Missbrauch der KI-Modelle musste Anthropic auf Geheiß der US-Regierung den Zugang zu Mythos und Fable zeitweise sperren. Die Blockade wurde inzwischen aufgehoben.
