Gemini Tokenizer
O Gemini Tokenizer conta a quantidade exata de tokens que seu texto usa nos modelos Gemini do Google, com a API oficial countTokens do Google. Cole seu texto, escolha um modelo e obtenha uma contagem precisa em vez de uma estimativa.
Por que não usar um tokenizer de GPT para o Gemini?
O Gemini usa o próprio tokenizer, diferente dos da OpenAI e da Anthropic. Contar tokens do Gemini com tiktoken (o tokenizer do GPT) resulta no número errado, e o Google não distribui um tokenizer do Gemini público no lado do cliente. A única contagem precisa vem do endpoint countTokens do próprio Google — que é o que esta ferramenta chama.
Como contar tokens do Gemini
- Cole ou digite seu texto.
- Escolha o modelo Gemini que você está mirando.
- Selecione Contar tokens para obter a contagem exata para esse modelo.
Modelos Gemini suportados
A lista de modelos é baseada em configuração, então é possível adicionar mais modelos Gemini sem alterações no código.
Exemplo
The quick brown fox jumps over the lazy dog. conta cerca de 10 tokens no Gemini. Textos que não são em inglês e documentos longos usam mais tokens — use a leitura ao vivo de caracteres por token para avaliar seu próprio texto.
Limitações
- É necessário um login gratuito; contar tokens não custa créditos.
- Sem divisão colorida por token: o tokenizer do Google não é público, então esta ferramenta retorna apenas a contagem exata. Para uma visualização dos tokens, use o ChatGPT Tokenizer.
- As contagens são específicas por modelo — troque de modelo para comparar.
