Conversor de tokens, palabras y caracteres
Estima rangos al convertir tokens, palabras y caracteres en texto inglés, japonés, chino, coreano o mixto.
Funciona por completo en tu navegador. Nada de lo que escribes se envía a ningún sitio.
Sobre esta herramienta
Introduce un valor, elige tokens, palabras o caracteres y selecciona el perfil lingüístico que mejor represente el contenido. El resultado es un rango estimado para planificación; usa el Contador de tokens para LLM si necesitas tokenización específica de un modelo.
Preguntas y respuestas
- ¿Este conversor usa un tokenizador exacto?
- No. Aplica proporciones amplias por perfil lingüístico y siempre presenta el resultado como una estimación.
- ¿Por qué muestra un rango y no un único número?
- La tokenización cambia según vocabulario, puntuación, escritura, código y modelo. Un rango expresa esa incertidumbre mejor que un valor único.
- ¿Qué perfil lingüístico debo elegir?
- Elige el perfil que corresponda a la mayor parte del contenido. Usa Mixto para textos multilingües, prosa con código o varias escrituras.