Etiqueta
#tokens
1 artículo.
1 min de lectura
Qué es un token (y por qué la IA no sabe contar letras)
Los modelos de lenguaje no leen palabras ni letras: leen tokens. Pruébalo tú mismo con el tokenizador interactivo y entiende de una vez qué es la ventana de contexto.
#fundamentos#tokens#interactivo