Token
KI-Grundlagen
Token — Die kleinste Einheit, in die ein KI-Modell Text zerlegt — ungefähr 0,7 Wörter im Deutschen.
Beispiel
Künstliche Intelligenz wird in ca. 5 Tokens zerlegt. Modelle zählen ihre Limits in Tokens, nicht Wörtern.
Verwandt: Kontextfenster · LLM (Large Language Model)
Mehr im Glossar
Alle Begriffe auf einen Blick →
Ein Token