Yapay zekada token nedir?

Token bir kelime değil, kelimenin bir parçasıdır

Modeller harfleri okumaz, kelimeleri de okumaz. Mesajınız modele ulaşmadan önce bir tokenizer, onu on binlerce parçadan oluşan sabit bir kelime dağarcığından parçalara ayırır. Yaygın kelimeler tek bir tokendir. Nadir kelimeler iki ya da üç token tutar. "The" tek bir tokendir; "tokenization" genellikle iki ya da üç token tutar; uzun bir URL ise onlarca token olabilir.

OpenAI'nin İngilizce metinler için yayınladığı kaba kural şudur: bir token yaklaşık dört karakterdir, ya da bir kelimenin yaklaşık dörtte üçü kadardır. Yani 100 token yaklaşık 75 kelimedir, 1.000 token ise bir buçuk sayfa eder.

Sayımı kaydıran iki şey vardır. Kod, semboller ve girintiler nedeniyle daha yoğun çalışır ve yaklaşık üç karakterde bir token oranına yaklaşır. Tokenizer'ın eğitim verisinde daha az temsil edilen diller ise daha pahalıya mal olur: Tayca, Hintçe veya Arapça'daki aynı anlam, İngilizce sürümünün iki ila üç katı token tutabilir; bu, token başına ödeme yapıyorsanız ve bu dillerden birinde yazıyorsanız önemlidir.

Bunu kendiniz de görebilirsiniz. Herhangi bir metni token maliyet hesaplayıcısına yapıştırın, her modeldeki sayıyı ve fiyatı gösterir.

Girdi tokenları ve çıktı tokenları iki farklı fiyattır

Her mesajın iki yarısı vardır. Girdi tokenları modelin okuduğu her şeydir: sorunuz, sistem talimatları, o ana kadarki konuşma, eklediğiniz herhangi bir dosya. Çıktı tokenları ise modelin geri yazdıklarıdır.

Sağlayıcılar ikisini farklı oranlarda ücretlendirir ve aradaki fark küçük değildir. Tablo, yapay zeka model maliyet endeksinden alınan milyon token başına liste fiyatıdır; fiyatlar OpenRouter'dan 2026-08-20 tarihinde çekilmiştir.

Çıktının daha pahalı olmasının nedeni modelin çalışma biçimidir. Girdiyi okumak, tüm tokenlar üzerinde tek bir paralel geçişte gerçekleşir. Çıktıyı yazmak ise tek seferde bir token olacak şekilde gerçekleşir; her yeni token, modelin tamamından bir geçiş daha gerektirir. 500 tokenlik bir yanıt, 500 ardışık geçiş demektir.

Gerçek bir mesajın maliyeti nasıl hesaplanır

Tipik bir alışverişi ele alalım: bir paragraflık bağlam içeren 300 kelimelik bir soru, 400 kelimeyle yanıtlanıyor. Bu yaklaşık 400 girdi tokenı ve 530 çıktı tokenı demektir.

• GPT-5.6 Luna'da: milyonda 400 × $0.20 artı 530 × $1.20, yani $0.00008 artı $0.00064, yaklaşık $0.0007. Sentin yüzde yedisi kadar.
• Claude Sonnet 5'te: milyonda 400 × $2 artı 530 × $10, yani $0.0008 artı $0.0053, yaklaşık $0.006. Yarım sentin biraz üzerinde.
• GPT-5.5'te: milyonda 400 × $5 artı 530 × $30, yani $0.002 artı $0.0159, yaklaşık $0.018. Neredeyse iki sent.

Her satırda çıktı yarısının faturanın yüzde 80 ila 90'ını oluşturduğuna dikkat edin. Maliyeti belirleyen sadece model değil, mesajın şeklidir: 2.000 kelimelik bir deneme isteyen tek satırlık bir soru pahalı örüntüdür, aynı modelde bu soruyla ilgili tek satırlık bir sorunun sorulduğu uzun bir belge ise ucuz olanıdır.

Uzaklaşıp bakıldığında asıl hikaye tüm katalog genelindeki yayılmadır. Yapay zeka model maliyet endeksindeki fiyatlandırılmış her model, standart bir yanıtın maliyetine göre aşağıdaki çizgide yer alır. En ucuzu Ling-3.0-flash $0.000053; en pahalısı ise hızlı modundaki Claude Opus 4.7 ile $0.105: aynı 1.500 token için kabaca 2.000 kat fark.

Diğer çarpan ise geçmiştir. Bir sohbette model, her turda konuşmanın tamamını yeniden okur, bu yüzden girdi sayısı her mesajla birlikte büyür. 40 turluk bir konuşma, ilk mesajı 40 kez gönderir. Uzun dizilerin yavaşlamasının ve sonunda bağlam penceresi nedir sınırına çarpmanızın nedeni budur.

Abonelik sayaçları neden gizler ama ortadan kaldırmaz

Tüketici planları sabit bir aylık ücret alır ve bu ücretin altında her sağlayıcı hâlâ tokenları saymaya devam eder. Bu sayım, mesaj sınırları, "limitinize ulaştınız" duvarı ve bütçe azaldığında sessizce daha küçük bir modele geçiş olarak yüzeye çıkar.

Whizi sayacı tam tersi yönde çalışır. Her modelin mesaj başına sabit bir kredi fiyatı vardır: ev modeli için 1 kredi, Claude Sonnet 5 için 10, Claude Opus 5 ve GPT-5.5 için 20 ve merdivenin en tepesinde 100. Bu sayı, mesajınızın veya yanıtın ne kadar uzun olduğuna asla bağlı değildir. Merdiven, gerçek bir token turuna sabitlenmiştir: ev modelinde 3.000 token girdi ve 800 token çıktı, bu da sağlayıcı harcamasında yaklaşık $0.00156 tutar ve bir kredi tanımlar. Whizi kredileri nasıl çalışır sayfasında tam tablo bulunur.

Bu takas bilinçlidir. Token başına bir sayaç kesin ama öngörülemezdir; mesaj başına bir kredi ise uzun mesajlara biraz cömert, kısa olanlara biraz eli sıkıdır, ama gönder tuşuna basmadan önce fiyatı her zaman bilirsiniz.

Tokenlar aynı zamanda kapasite sınırıdır

Tokenların önemli olmasının ikinci nedeni kapasitedir. Her modelin token cinsinden ölçülen bir bağlam penceresi vardır: girdi ve çıktı birlikte, aynı anda dikkate alabileceği maksimum miktar. Claude Haiku 4.5, 200.000 token barındırır. GPT-5.6 Terra, Claude Sonnet 5 ve Gemini 3.7 Flash yaklaşık 1 milyon token barındırır. 1.000 token başına 750 kelime oranında, bir milyon token kabaca 750.000 kelime, yani yaklaşık 1.500 sayfa eder.

Pencere ücretsiz değildir. Onu doldurmak her turda girdi tokenı harcar, bu yüzden 300.000 tokenlik bir belgeye sorulan on soru 3 milyon girdi tokenı demektir; bu da liste fiyatıyla Claude Sonnet 5'te $6 eder. Uygulamanın belgeyi aradığı ve yalnızca ilgili sayfaları gönderdiği retrieval, tam olarak bu faturadan kaçınmak için vardır. RAG nedir mekanizmayı açıklar ve bağlam penceresi karşılaştırması her modelin sınırını tek bir tabloda toplar. Sorunun ihtiyaç duyduğu sayfaları gönderin, dosyanın tamamını asla göndermeyin.