Fragmentos de texto (palabras, subpalabras o caracteres); que la IA procesa como unidades básicas que determinan capacidad y límites de longitud.
Ejemplo: «Inteligencia» -> «in»,»teli»,»gencia».
Por qué es importante: Determinan cómo «lee» el modelo, calculan el costo (API) y definen límites.
Respuesta