Guias de IA · 1 min de leitura

O que é um token em inteligência artificial?

Um token é a unidade com que um modelo de IA lê, escreve e cobra pelo texto. Ele relaciona palavras, custo e janela de contexto.

Um texto se divide em pequenas peças luminosas que fluem para um contador e uma pilha de moedas.

Um token é a pequena unidade com que um modelo de linguagem lê, escreve e cobra pelo texto. Pode ser uma palavra curta, parte de uma palavra ou um sinal de pontuação.

Por que os tokens determinam a cobrança

Os provedores contam entrada e saída em tokens, não em palavras. A mesma tarefa pode consumir quantidades diferentes de tokens conforme o idioma e o modelo, e a saída costuma ser mais cara que a entrada.

O que verificar antes de enviar

Estime o custo usando o preço por token do provedor e verifique a janela de contexto antes de enviar documentos longos. A versão em inglês deste tema usa o mesmo nome de artigo.

Escrito por

Chunyu Cai

Chunyu Cai é CEO da Lotook, LLC e empreendedor. Escreve sobre modelos de IA, agentes e como eles mudam o trabalho cotidiano. Chunyu Cai tem um mestrado pela instituição Imperial College London.