Travel TechHub
Glossário · tecnologia

Token (IA)

Definição

Unidade mínima de texto que um modelo de linguagem processa, equivalente a um pedaço de palavra. Modelos medem custo e limites em tokens.

tecnologiaTambém conhecido como tokens de LLM, token de linguagem, token de modelo de linguagem6 termos relacionadosCuradoria TTH

Token é a unidade mínima em que um modelo de linguagem (LLM) divide o texto antes de processá-lo. Não corresponde a uma palavra inteira: em português, 1 token equivale a cerca de 3 ou 4 caracteres, então uma palavra como "cancelamento" pode virar 3 ou 4 tokens.

Para que serve entender isso na prática:

  • Custo: APIs de IA cobram por volume de tokens consumidos, separando entrada (o que você envia) e saída (o que o modelo responde). Comparar modelos pelo preço exige olhar para essas duas métricas juntas.
  • Limites de contexto: a context window, que define quanto texto o modelo consegue considerar de uma vez, é medida em tokens. Um contrato de 10 páginas pode ou não caber numa janela, dependendo do modelo.
  • Velocidade: a taxa de geração é expressa em tokens por segundo, o que afeta a percepção de resposta em produtos com interface conversacional.

Em travel tech, isso se torna concreto ao dimensionar automações: um agente que lê itinerários e responde dúvidas de viajantes consome tokens proporcionais ao tamanho do histórico de conversa. Estimar esse volume antes de escolher o modelo evita surpresas na fatura.

Não confundir com tokenização de pagamentos, processo de substituir dados de cartão por um código seguro. Os dois termos coexistem no setor, mas não têm relação.

Perguntas frequentes

Token (IA) na prática

Quantos tokens tem uma página de texto em português?
Uma página de texto em português tem em torno de 400 a 600 tokens. Em português, 1 token corresponde a aproximadamente 3 ou 4 caracteres, o que é um pouco menos eficiente do que em inglês.
Como o número de tokens afeta o custo de usar uma API de IA?
APIs de LLM cobram separadamente por tokens de entrada (o que você envia ao modelo) e tokens de saída (o que ele responde). Quanto maior o histórico de conversa ou o documento enviado, mais tokens de entrada são consumidos e maior é o custo por requisição.
Token de IA é a mesma coisa que token de pagamento?
Não. Token de IA é a unidade de texto que um modelo de linguagem processa. Token de pagamento é um código que substitui dados sensíveis de cartão para aumentar a segurança em transações. Os dois termos coexistem no setor de travel, mas não têm relação entre si.
O que é context window em tokens?
Context window é o limite máximo de tokens que um modelo consegue considerar numa única interação, somando o que foi enviado e o que já foi respondido. Se a conversa ultrapassar esse limite, o modelo começa a perder o início do histórico.
Cobertura relacionada