Modele AI nie liczą słów, lecz tokeny. To narzędzie szacuje liczbę tokenów w tekście, jego koszt oraz udział w kontekście, a także konwertuje tokeny, słowa i strony.
Jak korzystać
- Wybierz język tekstu (francuski, angielski lub kod), a następnie wklej swój tekst lub prompt.
- Sprawdź szacowaną liczbę tokenów, jej zakres, liczbę słów i stron.
- Opcjonalnie wybierz model, aby zobaczyć koszt wejścia i procent wykorzystanego okna kontekstu.
- Użyj konwertera, aby przeliczyć tokeny na słowa lub strony i odwrotnie.
Zasady obliczeń
- Tekst jest analizowany bezpośrednio w przeglądarce: nie jest nigdzie wysyłany.
- Szacowanie dzieli tekst na słowa, liczby, znaki nowej linii i znaki interpunkcyjne. Słowo jest warte swoją długość podzieloną przez średnią długość tokena właściwą dla języka; liczba to jeden token na grupę trzech cyfr.
- Wyświetlany zakres wynosi od 15% poniżej do 20% powyżej szacunku centralnego.
- Konwerter stosuje współczynnik słów na token właściwy dla każdego języka i liczy stronę jako 500 słów.
Znane ograniczenia
Każdy model ma własny sposób tokenizacji: szacunek jest dokładny w około 20%. Do dokładnego rozliczenia użyj oficjalnego licznika wydawcy.
