Aktive Parameter

Aktive Parameter sind der Teil der einstellbaren Zahlenwerte eines KI-Modells, der für eine einzelne Anfrage wirklich mitrechnet. Bei manchen Modellen ist das nur ein Bruchteil der Gesamtzahl, was den Betrieb deutlich billiger macht.

Ein KI-Modell besteht aus vielen Milliarden Zahlen, die beim Lernen aus Beispielen eingestellt werden. Diese Zahlen heißen Parameter, und sie enthalten alles, was das Modell kann. Nicht jedes Modell benutzt für jede Anfrage alle diese Zahlen. Manche Modelle schalten pro Anfrage nur einen Teil ein. Genau dieser eingeschaltete Teil sind die aktiven Parameter. Ein Modell kann also 400 Milliarden Parameter besitzen und trotzdem nur 20 Milliarden davon nutzen, wenn es eine Frage beantwortet.

Warum das wichtig ist

Die Rechenzeit einer Antwort hängt vor allem an den aktiven Parametern. Je mehr Zahlen mitrechnen, desto länger dauert es und desto mehr Strom kostet es. Die Gesamtzahl der Parameter sagt dagegen eher, wie viel Wissen im Modell steckt.

Deshalb ist die Angabe für Firmen doppelt interessant. Sie können mit einer großen Gesamtzahl werben und trotzdem günstig anbieten. Wer Schlagzeilen über Modellgrößen liest, sollte also immer nachsehen, welche der beiden Zahlen gemeint ist. Ein Modell mit wenigen aktiven Parametern läuft schneller, braucht aber weiterhin sehr viel Arbeitsspeicher.

Wie funktioniert es?

Der übliche Weg heißt Mixture of Experts. Das Modell wird dabei in viele kleine Teilnetze zerlegt, die man Experten nennt. Ein kleines Zusatznetz, der Router, wählt für jedes Wort einige davon aus. Nur diese ausgewählten Experten rechnen mit, der Rest bleibt in diesem Moment untätig.

Ein Vergleich hilft: Eine große Bibliothek hat Millionen Bücher. Für eine bestimmte Frage holst du drei davon aus dem Regal. Die restlichen Bücher müssen trotzdem im Gebäude stehen, sonst könntest du sie nie holen. Genauso muss das komplette Modell im Speicher der Grafikkarten liegen, obwohl nur ein Bruchteil arbeitet.

Daraus folgt eine wichtige Faustregel. Aktive Parameter bestimmen die Geschwindigkeit und die Kosten pro Antwort. Die Gesamtzahl bestimmt, wie teuer die Hardware ist, auf der das Modell überhaupt läuft. Beide Zahlen zusammen beschreiben ein Modell erst vollständig.

Wo man dem Begriff begegnet

In technischen Ankündigungen neuer Modelle steht die Angabe fast immer. Typisch sind Formulierungen wie « 671 Milliarden Parameter, davon 37 Milliarden aktiv ». Solche Zahlen tauchten zum Beispiel bei Modellen von DeepSeek, Mistral und Alibaba auf. Auch mehrere Modelle von Google und Meta arbeiten inzwischen nach diesem Prinzip.

Für Anlegerinnen und Anleger ist die Zahl ein Hinweis auf Betriebskosten. Ein Anbieter mit wenigen aktiven Parametern kann pro Antwort billiger sein als die Konkurrenz. Das erklärt, warum einige chinesische Modelle 2024 und 2025 so niedrige Preise anbieten konnten.

Im Alltag merkst du den Unterschied nicht direkt. Du siehst nur, dass ein Chatbot schnell antwortet oder gratis nutzbar ist. Dahinter steht oft die Entscheidung, wie viele Parameter pro Anfrage tatsächlich mitrechnen dürfen.

Subscribe free. Unsubscribe the second it sucks.

High-signal news across AI, business, UX, and tech. Every morning.