Tokens — por qué los LLM ya hablan todos los idiomas

Tokens — por qué los LLM ya hablan todos los idiomas — Soleex BVLos tokens no son palabras. Los LLM cortan el texto en subpalabras, y por eso GPT-5, Claude y Gemini leen italiano, japonés y árabe casi como el inglés.Inicio