Token-Zähler. GPT, Claude, Gemini und mehr.

Bei normalem Englisch sind es mit dem Tokenizer von OpenAI etwa 1,300 Tokens, da ein Token im Schnitt ungefähr drei Viertel eines Wortes umfasst. Die neueren Claude-Modelle zählen für denselben Text etwa 2,000. Code, Zahlen und die meisten anderen Sprachen brauchen mehr Tokens pro Wort.

o200k_base, der neueste Tokenizer, den OpenAI in seiner tiktoken-Bibliothek veröffentlicht hat. Er wird von GPT-4o und neueren Modellen verwendet. Für seine neuesten Modelle hat OpenAI keinen eigenen Tokenizer veröffentlicht. Die Tokenzahlen sind daher Näherungswerte; das Feld usage in einer echten Antwort enthält immer die exakte Zahl.

Sende die Anfrage an den Tokenzähl-Endpunkt von Anthropic, POST /v1/messages/count_tokens. Er gibt zurück, wie viele Input-Tokens die Anfrage verbrauchen würde. Der Wert hier ist eine Schätzung: Wir passen die Zählung von OpenAI anhand des Verhältnisses an, das wir bei echten Claude-Anfragen messen.

Claude Opus 4.7 und spätere Modelle, einschließlich der 5.x-Modelle, verwenden einen neueren Tokenizer. Bei unseren Anfragen zählen sie etwa 1.53 Tokens für jedes Token, das der Tokenizer von OpenAI im selben Text erkennt. Berücksichtige das beim Vergleich der Preise pro Token.

Nein. Der Tokenizer wird in deinen Browser geladen und zählt die Tokens dort. Nichts, was du eingibst oder einfügst, wird an Zurelay oder andere gesendet.

Ja. Bilder, PDFs und Audio werden ebenfalls nach den Regeln des jeweiligen Labs in Tokens umgerechnet. Hier werden sie nicht mitgezählt, im Feld usage jeder API-Antwort aber schon.