Gemini e altri modelli di IA generativa elaborano input e output con una granularità chiamata token.
Informazioni sui token
I token possono essere singoli caratteri come z o intere parole come cat. Le parole lunghe
vengono suddivise in più token. L'insieme di tutti i token utilizzati dal modello è chiamato vocabolario e il processo di suddivisione del testo in token è chiamato tokenizzazione.
Per i modelli Gemini, un token equivale a circa 4 caratteri. 100 token equivalgono a circa 60-80 parole in inglese.
Quando la fatturazione è attivata, il costo di una chiamata all'API Gemini è determinato in parte dal numero di token di input e di output, pertanto conoscere come conteggiare i token può essere utile.