Penghitung token. GPT, Claude, Gemini, dan lainnya.

Untuk teks bahasa Inggris umum, sekitar 1,300 token dengan tokenizer OpenAI, karena rata-rata satu token setara dengan sekitar tiga perempat kata. Model Claude yang lebih baru menghitung sekitar 2,000 untuk teks yang sama. Kode, angka, dan sebagian besar bahasa lain membutuhkan lebih banyak token per kata.

o200k_base, tokenizer terbaru yang diterbitkan OpenAI dalam pustaka tiktoken, yang digunakan oleh GPT-4o dan model setelahnya. OpenAI belum menerbitkan tokenizer terpisah untuk model terbarunya, jadi anggap hitungannya sebagai perkiraan; field usage dalam respons sebenarnya selalu menunjukkan jumlah yang tepat.

Kirim permintaan ke endpoint penghitung token Anthropic, POST /v1/messages/count_tokens, yang mengembalikan jumlah token input yang akan digunakan permintaan tersebut. Angka di sini adalah perkiraan, disesuaikan dari hitungan OpenAI berdasarkan rasio yang kami ukur dari lalu lintas Claude sebenarnya.

Claude Opus 4.7 dan model setelahnya, termasuk model 5.x, menggunakan tokenizer yang lebih baru. Pada lalu lintas kami, model-model ini menghitung sekitar 1.53 token untuk setiap token yang ditemukan tokenizer OpenAI dalam teks yang sama, jadi pertimbangkan hal ini saat membandingkan harga per token.

Tidak. Tokenizer diunduh ke browser Anda dan penghitungan dilakukan di sana. Apa pun yang Anda ketik atau tempel tidak dikirim ke Zurelay atau pihak lain.

Ya. Gambar, PDF, dan audio juga dikonversi menjadi token, dengan aturan yang berbeda di setiap lab, dan tidak dihitung di sini. Field usage dalam setiap respons API menyertakannya.