AI Pirates
DE | EN
AI Pirates
DE | EN
concept

Token

KI-Grundlagen

// Beschreibung

Ein Token ist die kleinste Einheit, in die ein Large Language Model Text zerlegt. Statt ganzer Wörter verarbeiten LLMs Tokens — Wortteile, die typischerweise 3–4 Zeichen lang sind. „Marketing" wird z. B. in „Mark" + „eting" zerlegt, während kurze Wörter wie „the" ein einzelnes Token sind. Im Deutschen sind es ca. 1,5 Tokens pro Wort, im Englischen ca. 1,3.

Tokens bestimmen sowohl die Kosten als auch die Limits von KI-Anwendungen. Die API-Preise werden pro Million Tokens berechnet: GPT-5.2 kostet $1,75 Input / $14 Output, Claude Opus 4.6 kostet $15/$75, Gemini 3.1 Pro kostet $1,25/$5. Das Kontextfenster — wie viel Text ein Modell gleichzeitig verarbeiten kann — wird ebenfalls in Tokens gemessen.

Die Tokenisierung erfolgt durch Algorithmen wie BPE (Byte Pair Encoding), die häufige Zeichenfolgen zu einem Token zusammenfassen. Verschiedene Modelle verwenden verschiedene Tokenizer — derselbe Text kann bei GPT und Claude unterschiedlich viele Tokens haben. OpenAI's tiktoken-Bibliothek ermöglicht die genaue Berechnung im Voraus.

Für die Praxis wichtig: Lange Prompts (System + Kontext + Frage) verbrauchen Input-Tokens, die Antwort verbraucht Output-Tokens (die teurer sind). Effizientes Prompt Engineering spart nicht nur Kosten, sondern lässt auch mehr Platz im Kontextfenster für relevante Informationen.

// Anwendungsbereiche

  • API-Kostenberechnung
  • Kontextfenster-Management
  • Prompt-Optimierung
  • Budget-Planung für KI-Projekte
  • Text-Chunking für RAG
  • Modell-Auswahl nach Kosteneffizienz
  • Token-Limit-Monitoring
  • Batch-Processing-Optimierung
// AI Pirates Einschätzung

Token-Verständnis ist essentiell für Budgetplanung. Wir nutzen günstige Modelle (GPT-4o-mini, Haiku) für Routine-Aufgaben und Frontier-Modelle nur wo die Qualität es erfordert. So halten wir API-Kosten unter Kontrolle.

// Häufig gestellte Fragen

Was ist ein Token in der KI?
Ein Token ist die Grundeinheit, in die Text für KI-Modelle zerlegt wird. Es kann ein Wort, ein Wortteil oder ein Satzzeichen sein. Ein deutsches Wort entspricht durchschnittlich ~1,5 Tokens, ein englisches ~1,3. Tokens bestimmen die Kosten und Limits von KI-Anwendungen.
Wie viel kostet ein Token?
Die Preise variieren nach Modell und werden pro Million Tokens berechnet. GPT-5.2: $1,75 Input / $14 Output. Claude Haiku: $0,80/$4. GPT-4o-mini: $0,15/$0,60. Ein typischer Blog-Artikel von 1.000 Wörtern ≈ 1.500 Tokens, kostet also nur wenige Cent.
Was ist der Unterschied zwischen Input- und Output-Tokens?
Input-Tokens sind der Text, den Sie an das Modell senden (Prompt, System-Anweisung, Kontext). Output-Tokens sind die generierte Antwort. Output-Tokens sind 4–8× teurer als Input-Tokens, da die Generierung rechenintensiver ist.
Wie kann man Token-Kosten optimieren?
Effiziente Prompts schreiben (kein unnötiger Kontext), günstigere Modelle für einfache Aufgaben nutzen (GPT-4o-mini statt GPT-5.2), Caching einsetzen für wiederholte Anfragen, und Batch-Processing für Massenverarbeitung nutzen.

// Verwandte Einträge

LLM (Large Language Model) Begriff Kontextfenster Begriff GPT (Generative Pre-trained Transformer) Begriff Inferenz Begriff Transformer Begriff

Brauchst du Hilfe mit Token?

Wir beraten dich gerne zu Einsatz, Integration und Strategie.

Kontakt aufnehmen