Trajektorie

Eine Trajektorie ist die lückenlose Aufzeichnung eines Ablaufs von Anfang bis Ende. Man notiert dabei nicht nur das Ergebnis, sondern jeden einzelnen Zwischenschritt. Ursprünglich stammt das Wort aus der Physik und meint die Flugbahn eines Balls: Position und Geschwindigkeit zu jedem Zeitpunkt. In der Computerwelt meint es dasselbe Prinzip, nur mit Entscheidungen statt mit Metern. Ein Programm sieht eine Situation, wählt eine Handlung, die Situation verändert sich, und das wiederholt sich. Die gesamte Kette aus Situationen, Handlungen und Rückmeldungen nennt man Trajektorie.

Warum der Weg wichtiger ist als das Ziel

Bei vielen Aufgaben zählt nicht nur, ob am Ende das Richtige herauskommt. Es zählt auch, wie man dorthin gekommen ist. Zwei Programme können dieselbe richtige Antwort liefern. Das eine hat sauber gerechnet, das andere hat geraten und zufällig getroffen. Wer nur das Endergebnis anschaut, kann beide nicht unterscheiden.

Genau deshalb sind Trajektorien für das Training moderner KI-Systeme so wertvoll. Sie zeigen, an welcher Stelle ein Fehler entstanden ist. Wenn eine Aufgabe zwanzig Schritte hat und Schritt sieben falsch war, kann man das gezielt korrigieren. Ohne den aufgezeichneten Verlauf bliebe nur die Rückmeldung « insgesamt falsch », und die hilft beim Verbessern kaum weiter.

Hinzu kommt ein wirtschaftlicher Punkt. Gute Trajektorien sind teuer, weil sie oft von Menschen erzeugt oder überprüft werden müssen. Firmen kaufen inzwischen Datensätze, die aus solchen Verlaufsprotokollen bestehen: etwa Aufzeichnungen davon, wie erfahrene Programmiererinnen einen Fehler im Code suchen. Diese Daten sind knapper als einfacher Text aus dem Internet und deshalb ein eigener Markt geworden.

Vom ersten Schritt bis zur Belohnung

Technisch besteht eine Trajektorie aus einer Folge von drei Dingen, die sich abwechseln. Erstens der Zustand: alles, was das System gerade sieht oder weiß. Zweitens die Aktion: was es daraufhin tut. Drittens die Rückmeldung: ob dieser Schritt etwas gebracht hat. Dann beginnt der Zyklus von vorn, bis die Aufgabe erledigt oder abgebrochen ist.

Beim sogenannten bestärkenden Lernen, bei dem ein System durch Ausprobieren und Belohnung besser wird, sind Trajektorien das zentrale Material. Das System erzeugt viele Durchläufe für dieselbe Aufgabe, oft hunderte. Danach vergleicht man sie: Welche Durchläufe waren erfolgreich, welche nicht? Handlungen aus erfolgreichen Verläufen werden wahrscheinlicher gemacht, Handlungen aus erfolglosen seltener.

Ein häufiges Missverständnis: Eine Trajektorie ist kein Programm und keine feste Anleitung. Sie ist ein Protokoll eines einzelnen konkreten Versuchs. Zwei Durchläufe derselben Aufgabe ergeben fast immer unterschiedliche Trajektorien, weil kleine Zufälle den Verlauf verändern. Genau diese Vielfalt macht sie zum Lernstoff, denn aus vielen unterschiedlichen Wegen lässt sich ableiten, welcher meistens funktioniert.

Wo Verlaufsprotokolle im Alltag auftauchen

Am sichtbarsten sind Trajektorien bei KI-Assistenten, die selbstständig mehrere Arbeitsschritte erledigen. Ein solcher Assistent soll etwa einen Fehler in einer Software beheben. Er liest Dateien, ändert eine Zeile, startet einen Test, sieht das Ergebnis und ändert erneut. Diese ganze Kette wird gespeichert und später ausgewertet.

Auch außerhalb von Sprachmodellen ist der Begriff verbreitet. Ein selbstfahrendes Auto plant eine Trajektorie: die geplante Bahn der nächsten Sekunden, mit Position, Tempo und Lenkwinkel. Ein Roboterarm in einer Fabrik bekommt ebenfalls eine Trajektorie vorgegeben, damit er nicht gegen ein Hindernis stößt. Hier ist der Begriff näher an seiner ursprünglichen physikalischen Bedeutung.

In Nachrichten über KI-Firmen begegnet dir das Wort meist im Zusammenhang mit Trainingsdaten. Wenn ein Unternehmen ankündigt, es sammle « Agenten-Trajektorien », meint es Aufzeichnungen echter Arbeitsabläufe. Abzugrenzen ist das von einem einfachen Chatverlauf, der nur Fragen und Antworten enthält. Eine Trajektorie enthält zusätzlich die Handlungen und deren Wirkung auf die Umgebung.