KI Glossar

Token

Kurz erklärt

Kleine Texteinheiten, in die ein Modell Eingaben und Ausgaben intern zerlegt.

Zuletzt aktualisiert: 20.6.2026, 12:00:00

Auch bekannt als

Tokenisierung

Tokens sind die Verarbeitungseinheiten vieler Sprachmodelle. Ein Wort kann aus einem Token bestehen, aus mehreren Tokens oder nur ein Teil eines Tokens sein.

Warum das wichtig ist:

Kosten und Limits hängen oft an Tokens
das Context Window wird in Tokens gemessen
längere Prompts verbrauchen mehr Kapazität

Token sind die Basis für LLM, Context Window und Inference.