Что такое калькулятор токенов в слова и стоимость?
Большие языковые модели (LLM) — такие как GPT, Claude и Gemini — обрабатывают текст не словами, а токенами. Токен — это фрагмент текста, чаще всего часть слова длиной около четырёх символов. Этот калькулятор оценивает, сколько слов соответствует заданному числу токенов и во сколько эти токены обойдутся, исходя из цены модели за 1 млн (1M) токенов. Важно: цены провайдеры обычно указывают в долларах США ($), поэтому результат тоже считается в долларах — при необходимости пересчитайте сумму в рубли по актуальному курсу.
Как пользоваться калькулятором
Введите количество токенов, коэффициент «слов на токен» (значение 0,75 хорошо подходит для текста на английском языке) и, при желании, цену, которую ваш провайдер берёт за 1 млн токенов (оставьте поле пустым, если нужно посчитать только слова). Калькулятор мгновенно покажет примерное число слов, а если цена указана — и стоимость в долларах.
Разбор формулы
Оценка количества слов считается по формуле $$\text{слова} \approx \text{токены} \times 0{,}75$$ — это эмпирическое правило OpenAI для английского языка: 1 токен ≈ 4 символа ≈ 0,75 слова. Стоимость рассчитывается как $$\text{стоимость} = \frac{\text{токены}}{1\,000\,000} \times \text{цена за 1M}$$ поскольку большинство провайдеров указывают цены за миллион токенов. Для других языков (в том числе русского) или для кода уменьшайте коэффициент: они, как правило, «съедают» больше токенов на слово.
Пример расчёта
Допустим, у вас 1000 токенов, коэффициент 0,75 и цена 2 USD за 1 млн токенов. Тогда слова $$= 1000 \times 0{,}75 = \textbf{750 слов}$$ Стоимость $$= \frac{1000}{1\,000\,000} \times 2 = \mathbf{0{,}002}\ \text{USD}$$
Частые вопросы
Насколько точна оценка количества слов? Это приблизительный расчёт. Реальная токенизация зависит от модели и содержания текста; 0,75 слова на токен — надёжное среднее значение именно для английского языка.
Входные и выходные токены стоят одинаково? Нет — у многих провайдеров тарифы различаются. Запустите калькулятор дважды, для каждой цены отдельно, и сложите результаты.
Почему код и тексты не на английском считаются иначе? В них на одно слово приходится больше токенов, поэтому снижайте коэффициент (например, до 0,5) для более точной оценки. Для русского языка это особенно актуально.