Токены: как считаются и сколько стоит запрос

Единица текста, которой оперирует модель. В среднем один токен — это часть слова: примерно 0,7–0,75 слова для русского текста. Значит, тысяча слов — это около 1300–1500 токенов.

Почему длинный текст дороже

Оплата идёт за вход и за выход. Вход — ваш промпт и весь контекст диалога. Выход — ответ модели. Чем длиннее история переписки, тем дороже каждый следующий запрос.

Главная ошибка

Вести один длинный чат месяцами. Каждый запрос тащит за собой всю историю, и стоимость растёт, хотя вы задаёте короткий вопрос.

Решение: новый чат под новую задачу.

Как экономить

Длинный контекст стоит дорого. Один запрос с полным файлом на 40 тысяч токенов равен примерно двадцати коротким вопросам.

Видео и изображения

Там своя единица: генерация, а не токен. Стоимость зависит от модели, длины и разрешения. Видео — самая дорогая операция, один прогон может стоить как десять изображений.

Что делать

Считайте стоимость до запуска. В агрегаторах с оплатой за факт цена видна перед генерацией — это главное преимущество перед подпиской.

← Все материалы гида