Токен
Также: token, токены
Кусочек текста (часто часть слова), которыми модель измеряет вход и выход — и по которым считается оплата.
Токен — минимальная единица текста, с которой работает модель. Это не ровно слово: одно слово может разбиваться на несколько токенов, а короткое — быть одним. Грубо для русского: 1 токен ≈ 2–3 символа.
Всё, что вы отправляете и получаете, измеряется в токенах. От их количества зависят и скорость, и стоимость: API-сервисы берут плату за входные и выходные токены отдельно.
Понимание токенов помогает экономить: не раздувать контекст лишним текстом и понимать, почему длинные диалоги «дорожают».