
Sicherheitsmechanismus
Ein Sicherheitsmechanismus ist eine eingebaute Vorkehrung, die verhindern soll, dass ein KI-System schädliche, verbotene oder gefährliche Ausgaben produziert. Solche Vorkehrungen greifen an mehreren Stellen: beim Training, direkt bei der Eingabe und noch einmal bei der fertigen Antwort.
Ein Sicherheitsmechanismus ist eine eingebaute Vorkehrung, die ein Computerprogramm daran hindert, etwas Schädliches zu tun. Bei Programmen, die Texte oder Bilder erzeugen, geht es meist um die Ausgabe: Das System soll bestimmte Antworten gar nicht erst geben. Dazu gehören etwa Bauanleitungen für Waffen, Beleidigungen oder Hilfe bei Betrug. Der Begriff beschreibt keine einzelne Technik, sondern eine ganze Familie davon. Manche davon sind fest im Programm verankert, andere sind nachträglich davorgeschaltet. Der englische Ausdruck dafür lautet Guardrail, also Leitplanke.
Warum Anbieter ihre Modelle nicht ungebremst laufen lassen
Ein Sprachmodell lernt aus riesigen Textmengen aus dem Internet. Darin steht auch alles, was man dort so findet: Hetze, Falschinformationen, Anleitungen für gefährliche Dinge. Ohne Bremse würde das Modell dieses Wissen auf Nachfrage einfach weitergeben. Es hat kein eigenes Urteil darüber, ob eine Frage harmlos oder gefährlich ist.
Für die Anbieter ist das ein handfestes Risiko. Ein einziger Screenshot einer entgleisten Antwort kann einen Konzern tagelang in die Schlagzeilen bringen. Dazu kommt Regulierung: Die EU-Verordnung über künstliche Intelligenz verlangt für bestimmte Anwendungen nachweisbare Schutzvorkehrungen. Firmen bauen Sicherheitsmechanismen also nicht nur aus Überzeugung ein, sondern auch, weil Gesetze und Kunden es fordern.
Es gibt allerdings einen Zielkonflikt, den man kennen sollte. Je strenger die Schranken, desto häufiger verweigert ein Modell auch berechtigte Anfragen. Eine Krankenpflegerin, die nach Medikamentendosierungen fragt, bekommt dann eine Abfuhr. Diese übervorsichtigen Fehlalarme heißen im Fachjargon Overrefusal. Entwickler suchen ständig den Punkt zwischen zu lax und zu zugeknöpft.
Drei Schichten: Training, Eingabefilter, Ausgabeprüfung
Die erste Schicht liegt im Training selbst. Menschen bewerten dabei Antworten des Modells und markieren die problematischen. Das Modell wird anschließend so nachjustiert, dass es solche Antworten seltener erzeugt. Dieses Nachjustieren mit menschlichem Feedback ist der Grund, warum ein fertiger Chatbot ganz anders reagiert als das rohe Modell darunter.
Die zweite Schicht sitzt vor dem Modell und prüft die Eingabe. Ein kleineres Zusatzprogramm liest die Frage und schätzt ein, ob sie in eine verbotene Kategorie fällt. Bei Verdacht wird die Anfrage gar nicht erst weitergereicht. Die dritte Schicht arbeitet danach: Sie liest die fertige Antwort und blockiert sie notfalls, bevor der Nutzer sie sieht. Deshalb sieht man manchmal, wie ein Text kurz erscheint und dann wieder verschwindet.
Keine dieser Schichten ist dicht. Es gibt eine ganze Szene von Leuten, die Umgehungen suchen, sogenannte Jailbreaks. Ein klassischer Trick ist die Rollenspiel-Anfrage: Man bittet das Modell, eine Figur in einem Roman zu spielen, die die verbotene Auskunft gibt. Anbieter stopfen solche Lücken laufend, neue tauchen ebenso laufend auf. Sicherheitsmechanismen sind also kein fertiger Zustand, sondern ein Wettlauf.
Woran man Leitplanken im Alltag erkennt
Am deutlichsten merkt man sie an Verweigerungen. Sätze wie „Dabei kann ich leider nicht helfen“ sind das sichtbare Ergebnis eines Sicherheitsmechanismus. Auch Bildgeneratoren zeigen ihn: Viele weigern sich, echte Politiker in erfundenen Szenen darzustellen. Und wenn ein Chatbot bei medizinischen Fragen auf einen Arztbesuch verweist, steckt dieselbe Logik dahinter.
In Nachrichten taucht der Begriff meist dann auf, wenn etwas schiefgegangen ist. Berichte über Chatbots, die Jugendlichen schädliche Ratschläge gaben, drehen sich im Kern um versagende Schutzvorkehrungen. Umgekehrt werben Anbieter mit ihren Sicherheitsberichten, wenn sie ein neues Modell vorstellen. Diese Dokumente heißen oft System Card oder Model Card.
Abzugrenzen ist der Begriff von IT-Sicherheit im klassischen Sinn. Dort geht es um Angreifer von außen, um Passwörter und verschlüsselte Verbindungen. Ein KI-Sicherheitsmechanismus schützt dagegen vor dem, was das System selbst ausgibt. Beide Bereiche überschneiden sich, meinen aber unterschiedliche Gefahren.