#tokens

Lección · IA aplicada

Qué es un token (y por qué la IA no sabe contar letras)

Los modelos no leen palabras ni letras: leen tokens. Aquí lo pruebas tú mismo con un tokenizador en vivo y entiendes de una vez qué es la ventana de contexto.