
AI Safety Governance Framework
Ein AI Safety Governance Framework ist ein schriftlich festgelegtes Regelwerk dafür, wie eine Organisation oder ein Staat mit den Risiken von künstlicher Intelligenz umgeht. Es legt fest, wer Risiken prüft, welche Grenzen gelten und was passiert, wenn etwas schiefgeht.
Computerprogramme, die aus Beispielen lernen und dann selbst Texte, Bilder oder Entscheidungen erzeugen, nennt man künstliche Intelligenz oder kurz KI. Solche Systeme können nützlich sein, aber auch Schaden anrichten: falsche Auskünfte, benachteiligte Bewerber, Anleitungen für Waffen. Ein AI Safety Governance Framework ist ein geordnetes Regelwerk, das genau diese Gefahren behandeln soll. Es beschreibt, welche Risiken man ernst nimmt, wer sie prüft und welche Anwendungen verboten bleiben. Der englische Begriff „Governance“ bedeutet dabei ungefähr: Wer entscheidet was, nach welchen Regeln, und wer trägt die Verantwortung. Solche Rahmenwerke werden von Unternehmen, von Staaten und von internationalen Organisationen geschrieben.
Warum Freiwilligkeit allein nicht reicht
KI-Systeme werden inzwischen in Bereichen eingesetzt, in denen Fehler teuer oder gefährlich sind. Banken sortieren damit Kreditanträge, Kliniken werten Aufnahmen aus, Behörden filtern Anträge vor. Wenn dort ein System systematisch falsch liegt, betrifft das sofort tausende Menschen. Ohne festes Regelwerk hängt es vom einzelnen Entwicklerteam ab, ob jemand vorher gründlich testet.
Für Unternehmen ist ein solches Rahmenwerk außerdem eine Absicherung. Wer nachweisen kann, dass Risiken dokumentiert und geprüft wurden, steht bei Gerichten und Aufsichtsbehörden besser da. In Europa ist das seit der KI-Verordnung der EU keine reine Kür mehr. Diese Verordnung teilt Anwendungen in Risikoklassen ein und verlangt für Hochrisiko-Anwendungen Dokumentation, Tests und menschliche Aufsicht. Ein internes Rahmenwerk ist der Weg, diese Pflichten im Betriebsalltag umzusetzen.
Ein häufiger Irrtum ist, ein Framework sei dasselbe wie ein Gesetz. Das ist falsch. Gesetze gelten verbindlich für alle, ein Framework ist meist eine selbst gewählte oder branchenweit empfohlene Ordnung. Viele Frameworks sind gerade deshalb entstanden, weil Gesetze langsamer sind als die Technik.
Vom Risikoregister bis zum Notausschalter
Die meisten dieser Rahmenwerke folgen einem ähnlichen Ablauf in vier Schritten. Zuerst wird aufgelistet, was schiefgehen kann, und wie schwer die Folgen wären. Dann werden Maßnahmen festgelegt, die diese Risiken kleiner machen sollen. Anschließend wird gemessen, ob die Maßnahmen wirken, und zum Schluss wird der ganze Vorgang schriftlich festgehalten.
Ein typisches Werkzeug ist das Red Teaming: Ein eigenes Team versucht absichtlich, das System zu einer schädlichen Antwort zu überreden, bevor Kunden es tun. Dazu kommen sogenannte Schwellenwerte. Erreicht ein Modell eine bestimmte gefährliche Fähigkeit, darf es nur mit zusätzlichen Schutzmaßnahmen veröffentlicht werden. Manche Frameworks sehen auch einen Abschaltplan vor, falls ein laufendes System auffällig wird.
Man kann sich das wie die Sicherheitsordnung in einem Chemielabor vorstellen. Dort hängt nicht einfach ein Schild „vorsichtig arbeiten“. Es gibt Gefahrenlisten, Schutzbrillenpflicht, Zuständige und eine Notduschtaste. Ein AI Safety Governance Framework überträgt diese Logik auf Software: klare Zuständigkeiten statt guter Absichten.
Wo solche Rahmenwerke in den Nachrichten auftauchen
Die großen KI-Labore haben eigene Versionen veröffentlicht, oft unter Namen wie „Responsible Scaling Policy“ oder „Preparedness Framework“. Darin steht, ab welcher Fähigkeitsstufe ein Modell als riskant gilt. Wenn ein Unternehmen ein neues Sprachmodell vorstellt, wird meist auch ein Sicherheitsbericht dazu mitveröffentlicht. Genau dieser Bericht ist die praktische Anwendung des jeweiligen Frameworks.
Auf staatlicher Seite ist das amerikanische NIST AI Risk Management Framework bekannt, das eine Bundesbehörde für Normen erarbeitet hat. China hat 2024 ein eigenes „AI Safety Governance Framework“ vorgelegt, das dem Begriff seinen Namen gibt. Auf Konferenzen wie den internationalen KI-Sicherheitsgipfeln geht es regelmäßig darum, diese nationalen Ansätze vergleichbar zu machen.
Für Anleger und Beobachter sind diese Dokumente aus einem nüchternen Grund interessant. Sie zeigen, welche Produkte ein Unternehmen überhaupt auf den Markt bringen darf und wo Verzögerungen drohen. Wer in den Nachrichten liest, ein Modell werde „aus Sicherheitsgründen später veröffentlicht“, sieht meist ein Framework bei der Arbeit.