Guías de IA · 1 min de lectura

¿Qué es un token en inteligencia artificial?

Un token es la unidad con la que un modelo de IA lee, escribe y factura texto. Relaciona las palabras, el costo y la ventana de contexto.

Un texto se divide en pequeñas piezas luminosas que fluyen hacia un contador y una pila de monedas.

Un token es la pequeña unidad con la que un modelo de lenguaje lee, escribe y factura texto. Puede ser una palabra corta, parte de una palabra o un signo de puntuación.

Por qué los tokens determinan la factura

Los proveedores cuentan la entrada y la salida en tokens, no en palabras. Una misma tarea puede consumir distintos números de tokens según el idioma y el modelo, y la salida suele ser más cara que la entrada.

Qué comprobar antes de enviar

Calcula el costo con el precio por token del proveedor y comprueba la ventana de contexto antes de enviar documentos largos. La versión inglesa de este tema usa el mismo nombre de artículo.

Escrito por

Chunyu Cai

Chunyu Cai es el director ejecutivo de Lotook, LLC y un emprendedor que escribe sobre modelos de IA, agentes y cómo cambian el trabajo cotidiano. Chunyu Cai tiene un título de máster de Imperial College London.