Модели ИИ считают не словами, а токенами. Этот инструмент оценивает количество токенов в тексте, его стоимость и долю контекста, которую он занимает, а также конвертирует токены, слова и страницы.
Как использовать
- Выберите язык текста (французский, английский или код), затем вставьте ваш текст или промпт.
- Посмотрите оценку количества токенов, его диапазон, количество слов и страниц.
- При желании выберите модель, чтобы увидеть стоимость ввода и процент использованного окна контекста.
- Используйте конвертер для перевода из токенов в слова или страницы и обратно.
Принципы расчёта
- Текст анализируется прямо в вашем браузере: он никуда не отправляется.
- Оценка разбивает текст на слова, числа, переводы строк и знаки препинания. Слово оценивается по своей длине, делённой на среднюю длину токена для данного языка; число оценивается как один токен на группу из трёх цифр.
- Отображаемый диапазон составляет от 15% ниже до 20% выше центральной оценки.
- Конвертер применяет соотношение слов на токен, специфичное для каждого языка, и считает одну страницу за 500 слов.
Важные ограничения
У каждой модели своё собственное разбиение: оценка точна примерно до 20%. Для точного расчёта стоимости используйте официальный счётчик разработчика модели.
