Jetonları anlama ve sayma


Gemini ve diğer üretken yapay zeka modelleri, giriş ve çıkışı ayrıntılı bir şekilde işler. jeton adı verilir.

Bu kılavuzda, belirli modellerin bağlam pencerelerini ve Metin girişi, sohbet, çok modlu gibi kullanım alanları için sayım jetonları bilgileri girebiliriz.

Jetonlar hakkında

Jetonlar, z gibi tek karakterlerden veya cat gibi tam kelimelerden oluşabilir. Uzun kelimeler ve daha sonra birkaç jetona bölünür. Model tarafından kullanılan tüm jeton kümesi kelime dağarcığı denir ve metni simgesel parçalara ayırma işlemine tokenization değerleridir.

Gemini modellerinde bir jeton, yaklaşık 4 karaktere eşdeğerdir. 100 jeton, yaklaşık 60-80 İngilizce kelimeye eşittir.

Faturalandırma etkinleştirildiğinde Gemini API'ye yapılan aramaların maliyeti kısmen giriş ve çıkış jetonlarının sayısına göre belirlenir. Böylece, sayma jetonları faydalı olabilir.