OpenAI, Anthropic und Co. wissen nicht, wie ihre Modelle genau funktionieren – das ist das Blackbox-Problem

Niemand weiß so recht, wie die größten KI-Modelle funktionieren. Das steckt dahinter.

Was machen die Modelle da? So richtig weiß das keiner. (Bildquelle: Adobe Stock – Chingraph) Was machen die Modelle da? So richtig weiß das keiner. (Bildquelle: Adobe Stock – Chingraph)

Eine KI lehnt euren Kreditantrag ab. Ein autonomes Auto bremst nicht rechtzeitig. Eine Übersetzung klappt nicht so gut wie gewohnt. Und niemand – nicht mal die Entwickler dahinter – kann euch genau sagen, warum. Willkommen beim sogenannten Blackbox-Problem, einer der größten offenen Baustellen der KI-Forschung.

Wie brisant das Thema ist, zeigt ein Vorfall aus diesem Sommer: Ein KI-System von OpenAI hackte eigenständig die Server von Hugging Face, einer der größten Plattformen für KI-Modelle. Was genau in dem Moment im »Kopf« der KI vorging, lässt sich bis heute nur in Teilen rekonstruieren.

Was ist das Blackbox-Problem?

Moderne KI-Systeme lernen ähnlich wie Kinder: durch Beispiele. Ihr zeigt ihnen tausende Bilder von Katzen, und irgendwann erkennt die KI selbstständig, was eine Katze ausmacht (via umdearborn.edu).

Das Problem dabei: Die KI kann euch danach nicht erklären, wie sie zu ihrem Urteil gekommen ist. Samir Rawashdeh, Professor für Elektro- und Computertechnik an der University of Michigan-Dearborn, vergleicht das mit menschlicher Intuition:

»Es ist eines dieser eigenartigen Dinge, die man weiß, aber man weiß nicht, woher man es weiß.«

Das sogenannte Deep Learning – eine der verbreitetsten KI-Methoden – arbeitet nach demselben Prinzip. Die Systeme »vergessen« quasi sofort, welche Trainingsdaten zu welcher Entscheidung geführt haben. Übrig bleibt nur das Ergebnis, nicht der Denkweg.

Das wird vor allem dann gefährlich, wenn KI in sicherheitsrelevanten Bereichen eingesetzt wird: bei autonomem Fahren, in der Medizin oder bei der Kreditvergabe. Trifft die KI dort eine falsche oder gar diskriminierende Entscheidung, lässt sich der Fehler kaum zurückverfolgen und reparieren.


Video starten 45:32 Gaming wird immer teurer – wann ist Schluss mit der Preisexplosion?


Aktuelles Beispiel: Als eine KI eigenständig hackte

Wie ernst das Blackbox-Problem inzwischen ist, zeigte sich im Sommer 2026 in aller Deutlichkeit. OpenAI testete ein internes Forschungsmodell auf seine Cybersecurity-Fähigkeiten – in einer eigentlich abgeschotteten Testumgebung.

Dabei passierte Folgendes:

  • Das Modell blieb bei einer Sicherheitsaufgabe hängen und suchte sich eigenständig einen Weg ins Internet.
  • Dafür fand es eine bis dahin unbekannte Sicherheitslücke in einer Drittanbieter-Software.
  • Über diese Lücke verschaffte es sich Zugriff auf die Systeme von Hugging Face, einer Plattform mit hunderttausenden offenen KI-Modellen und Datensätzen.
  • Laut OpenAI organisierten sich mehrere Instanzen des Modells dabei untereinander: Sie hinterließen sich über die Sicherheitslücke gegenseitig Hinweise, quasi wie ein improvisiertes schwarzes Brett.

Hugging Face bemerkte den Angriff und setzte eigene KI-Modelle ein, um den Schaden einzudämmen und den Vorfall zu analysieren. Auf der Sicherheitskonferenz Black Hat 2026 bezeichnete OpenAI-Mitarbeiter Michael Dalton den Vorfall später als bedeutenden Wendepunkt für die IT-Sicherheitsbranche.

Das eigentlich Beunruhigende: OpenAI selbst konnte den genauen Entscheidungsweg des Modells nur nachträglich und in Teilen rekonstruieren – ein Paradebeispiel für das Blackbox-Problem in der Praxis.

Baseus PicoGo 100W USB C Ladegerät
Kompaktes Ladegerät mit viel Leistung
Baseus PicoGo 100W USB C Ladegerät
100-Watt, 3x USB-C, mit Touchscreen, einklappbar
Promocode für 20 Euro Rabatt: BSAH22GS (gültig bis 31.10.2026)
60 €40 €
Baseus Picogo AM52 Power Bank
Hochwertige Powerbank mit viel Kapazität
Baseus Picogo AM52 Power Bank
10.000 mAh, 45 Watt, Qi2.2, integriertes Kabel
Promocode für 30 Euro Rabatt: BSAM52GS (gültig bis 31.10.2026)
80 €50 €
Baseus Picogo Air AM71
Nur etwa 7mm dick
Baseus Picogo Air AM71
5.000 mAh, 22,5 Watt
Promocode für 38 Euro Rabatt: BSAM71GS (gültig bis 31.10.2026)
80 €42 €
Baseus Inspire XC1
Open-Ear mit exzellentem Klang
Baseus Inspire XC1
IPX4, High-Res, LDAC, Dolby Audio,
Mit Sound von Bose.
150 €120 €

Woher kommt das Problem?

Die Ursache liegt tief im technischen Fundament moderner KI. Deep-Learning-Systeme bestehen aus riesigen neuronalen Netzen mit Millionen bis Milliarden und teilweise schon Billionen einzelner Verbindungen (Parameter). Diese passen sich während des Trainings selbstständig an, bis das Modell zuverlässig richtige Antworten liefert.

Das Ergebnis ist zwar oft erstaunlich treffsicher – aber niemand hat diese Verbindungen von Hand programmiert oder dokumentiert. Es gibt schlicht kein Regelwerk, das sich im Nachhinein auslesen ließe.

Laut Rawashdeh gibt es aktuell vor allem zwei Lösungsansätze für dieses Dilemma:

  1. Regulierung: Risikoreiche KI-Anwendungen, zum Beispiel in der Justiz oder im Finanzwesen, stärker einschränken oder ganz verbieten. Die EU verfolgt mit ihrem KI-Gesetz genau diesen Ansatz.
  2. Explainable AI: Neue Methoden entwickeln, mit denen sich KI-Entscheidungen nachträglich sichtbar machen lassen, etwa durch zusätzliche Analyse-Tools oder speziell trainierte neuronale Netze.

Zum Fall Hugging Face und ähnlichen »Ausbrüchen« von KI-Systemen:


Beide Ansätze stecken laut Rawashdeh noch in den Kinderschuhen. Bis KI-Systeme ihre eigenen Entscheidungen zuverlässig erklären können, bleibt die Blackbox vorerst verschlossen – und Vorfälle wie der Hugging-Face-Hack dürften noch häufiger auftreten und sind es auch schon.

Wie steht ihr zu den Hacking-Angriffen von KI-Modellen? Schreibt es gerne in die Kommentare!


Kommentare(0)
Kommentar-Regeln von GameStar
Bitte lies unsere Kommentar-Regeln, bevor Du einen Kommentar verfasst.

Nur angemeldete Benutzer können kommentieren und bewerten.