Was sind Tokens?
Ein Token ist die kleinste Einheit, in die ein KI-Sprachmodell Text zerlegt, bevor es ihn verarbeiten kann. Tokens sind das "Alphabet" der Large Language Models -- alles, was ein LLM liest oder schreibt, besteht aus Tokens. Das Verstaendnis von Tokens ist grundlegend fuer jeden, der KI-Tools professionell einsetzen moechte, denn Tokens bestimmen sowohl die Faehigkeiten als auch die Kosten der Nutzung.
Ein Token ist dabei nicht gleichbedeutend mit einem Wort. Je nach Sprache und Tokenisierungsmethode kann ein Wort aus einem oder mehreren Tokens bestehen, und umgekehrt koennen haeufige kurze Woerter zu einem einzigen Token zusammengefasst werden.
Wie funktioniert Tokenisierung?
Bevor ein GPT- oder Claude-Modell Ihren Text verarbeiten kann, muss dieser in Tokens umgewandelt werden. Dieser Prozess heisst Tokenisierung. Dabei wird ein Algorithmus (oft BPE -- Byte Pair Encoding) verwendet, der Text in Teilstuecke zerlegt.
Einige Beispiele fuer die englische Tokenisierung:
- "Hello" = 1 Token
- "artificial intelligence" = 2 Tokens
- "Counterintuitively" = 3 Tokens ("Counter", "intu", "itively")
- GPT-4o: ca. 2,50 Dollar pro Million Eingabe-Tokens, 10 Dollar pro Million Ausgabe-Tokens
- Claude Sonnet 4: ca. 3 Dollar pro Million Eingabe-Tokens, 15 Dollar pro Million Ausgabe-Tokens
- GPT-4o mini / Claude Haiku: deutlich guenstiger, oft unter 1 Dollar pro Million Tokens
- Open-Source-Modelle (Llama, Mistral): kostenlos bei Self-Hosting, nur Serverkosten
- GPT-4o: 128.000 Tokens (ca. 100 Seiten Text)
- Claude 3.5 Sonnet: 200.000 Tokens (ca. 150 Seiten Text)
- Gemini 1.5 Pro: bis zu 1.000.000 Tokens (ca. 750 Seiten Text)
- Klare, praezise Prompts: Weniger Tokens in der Eingabe sparen Geld
- Systemanweisungen: Einmal definiert, werden sie bei jeder Anfrage mitgezaehlt. Kurz und praegnant formulieren
- Modellwahl: Fuer einfache Aufgaben reichen kleinere, guenstigere Modelle
- Caching: Manche Anbieter bieten Prompt-Caching an, das bei wiederholten aehnlichen Anfragen Tokens spart
Fuer die deutsche Sprache ist die Tokenisierung aufwendiger. Deutsche Woerter sind im Durchschnitt laenger, und zusammengesetzte Substantive wie "Datenschutzgrundverordnung" werden in mehrere Tokens zerlegt. Als Faustregel gilt: Ein deutsches Wort entspricht etwa 1,5 bis 2 Tokens, waehrend ein englisches Wort durchschnittlich 1 bis 1,3 Tokens benoetigt.
Das bedeutet konkret: Deutsche Texte verbrauchen mehr Tokens als englische -- und kosten damit bei tokenbasierter Abrechnung entsprechend mehr.
Kosten pro Token
Die Preisgestaltung der meisten KI-APIs basiert auf der Anzahl verarbeiteter Tokens. Dabei wird zwischen Eingabe-Tokens (Input, Ihr Prompt) und Ausgabe-Tokens (Output, die Antwort des Modells) unterschieden. Ausgabe-Tokens sind typischerweise teurer als Eingabe-Tokens.
Typische Preise (Stand 2026, gerundet):
Fuer ein typisches Gespraech mit einem Chatbot (ca. 500 Woerter Eingabe und 1.000 Woerter Ausgabe) fallen bei GPT-4o Kosten von wenigen Cent an. Bei hohem Volumen summiert sich das jedoch schnell.
Das Kontextfenster: Tokens als Begrenzung
Das Kontextfenster eines Modells definiert, wie viele Tokens es gleichzeitig verarbeiten kann -- Eingabe und Ausgabe zusammen. Je groesser das Kontextfenster, desto laengere Texte kann das Modell beruecksichtigen:
Tokens zaehlen und optimieren
Fuer Unternehmen, die KI-APIs nutzen, ist die Token-Optimierung ein wichtiger Kostenfaktor:
Bedeutung fuer Unternehmen
Tokens sind die Waehrung der KI-Welt. Wer KI-Tools im Unternehmen einsetzt, sollte verstehen, dass jede Interaktion Tokens verbraucht und damit Kosten verursacht. Eine durchdachte Token-Strategie -- richtige Modellwahl, effiziente Prompts und kluge Nutzung des Kontextfensters -- kann die KI-Kosten erheblich senken, ohne die Qualitaet zu beeintraechtigen.
Fazit
Tokens sind das fundamentale Massystem der modernen KI. Sie bestimmen, was ein Modell verarbeiten kann, wie schnell es arbeitet und was es kostet. Fuer den professionellen Einsatz von Kuenstlicher Intelligenz ist ein solides Verstaendnis von Tokens und ihrer Auswirkungen auf Kosten und Leistung unverzichtbar.