Token-, Wort- und Zeichenumrechner
Schätzt Bereiche für die Umrechnung zwischen Token, Wörtern und Zeichen in englischem, japanischem, chinesischem, koreanischem oder gemischtem Text.
Läuft vollständig im Browser. Nichts, was Sie eingeben, wird hochgeladen.
Über dieses Werkzeug
Geben Sie einen Wert ein, wählen Sie Token, Wörter oder Zeichen als Ausgangseinheit und das passende Sprachprofil. Der Rechner liefert einen Schätzbereich zur groben Planung; für modellspezifische Tokenisierung verwenden Sie den LLM-Tokenzähler.
Fragen und Antworten
- Verwendet dieser Umrechner einen exakten Tokenizer?
- Nein. Er nutzt breite Verhältnisse je Sprachprofil und kennzeichnet jedes Ergebnis als Schätzung.
- Warum wird ein Bereich statt einer einzelnen Zahl angezeigt?
- Tokenisierung hängt von Wortschatz, Satzzeichen, Schriftsystem, Code und Zielmodell ab. Ein Bereich bildet diese Unsicherheit ehrlicher ab als ein Einzelwert.
- Welches Sprachprofil sollte ich wählen?
- Wählen Sie das Profil, das zum größten Teil des Inhalts passt. Für mehrsprachigen Text, Prosa mit Code oder mehrere Schriftsysteme verwenden Sie „Gemischt“.