AI-modellen tellen niet in woorden maar in tokens. Deze tool schat het aantal tokens in een tekst, de kosten ervan en het aandeel van de context dat het inneemt, en converteert tokens, woorden en pagina’s.
Hoe het te gebruiken
- Kies de taal van de tekst (Frans, Engels of code), plak vervolgens uw tekst of prompt.
- Lees het geschatte aantal tokens, het bereik, het aantal woorden en pagina’s.
- Selecteer optioneel een model om de invoerkosten en het percentage van het gebruikte contextvenster te zien.
- Gebruik de converter om van tokens naar woorden of pagina’s te gaan, en omgekeerd.
De principes achter de berekening
- De tekst wordt rechtstreeks in uw browser geanalyseerd: hij wordt nergens naartoe verzonden.
- De schatting splitst de tekst in woorden, getallen, regeleinden en leestekens. Een woord telt voor zijn lengte gedeeld door een gemiddelde tokenlengte per taal; een getal telt voor één token per groep van drie cijfers.
- Het weergegeven bereik loopt van 15% onder tot 20% boven de centrale schatting.
- De converter past een ratio woorden per token toe die specifiek is voor elke taal, en rekent één pagina voor 500 woorden.
Limieten om te kennen
Elk model heeft zijn eigen tokenisatie: de schatting is tot ongeveer 20% nauwkeurig. Voor exacte facturering, gebruik de officiële teller van de uitgever.
