Tokenteller. GPT, Claude, Gemini en meer.

In gewoon Engels ongeveer 1,300 tokens met de tokenizer van OpenAI, omdat een token gemiddeld ongeveer driekwart woord is. De nieuwere modellen van Claude tellen ongeveer 2,000 voor dezelfde tekst. Code, getallen en de meeste andere talen kosten meer tokens per woord.

o200k_base, de nieuwste tokenizer die OpenAI in de tiktoken-bibliotheek heeft gepubliceerd, gebruikt door GPT-4o en latere modellen. OpenAI heeft geen aparte tokenizer voor de nieuwste modellen gepubliceerd, dus beschouw de tellingen daarvoor als een benadering; het veld usage in een echte response geeft altijd het exacte aantal.

Stuur de request naar het endpoint voor tokentelling van Anthropic, POST /v1/messages/count_tokens. Dat geeft het aantal inputtokens terug dat de request zou gebruiken. Het getal hier is een schatting, berekend door de telling van OpenAI te schalen met de verhouding die we bij echt Claude-verkeer meten.

Claude Opus 4.7 en latere modellen, waaronder de 5.x-modellen, gebruiken een nieuwere tokenizer. In ons verkeer tellen ze ongeveer 1.53 tokens voor elk token dat de tokenizer van OpenAI in dezelfde tekst telt, dus houd daar rekening mee als je prijzen per token vergelijkt.

Nee. De tokenizer wordt naar je browser gedownload en het tellen gebeurt daar. Niets wat je typt of plakt, wordt naar Zurelay of iemand anders gestuurd.

Ja. Afbeeldingen, PDF's en audio worden ook omgezet in tokens, volgens regels die per aanbieder verschillen. Ze worden hier niet meegeteld. Het veld usage in elke API-response telt ze wel mee.