Токен — это фрагмент текста, который используется для обработки естественного языка.
Токены могут быть как целыми словами, так и частями слов. Например, в английском языке 1 токен — это примерно 4 символа или 0,75 слова.
Есть два вида токенов:
Входящий промт:
Ты консультант компании по продаже шин для легковых автомобилей.
Можешь предлагать зимние: шипованные или без шипов, летние, а также демисезонные шины для осени или весны в зависимости от времени года.
Размерность шин от 12 до 17 дюймов. Ширина шин может быть от 175 миллиметров до 265 миллиметров. Высота профиля от 45 до 70 миллиметров.
Подробную информацию по маркам шин и их характеристикам, ты можешь найти на сайте: https://twin.shiny24.ru/legkovie.
Помни, что дисками для колес мы не торгуем! Кратко ответь на поставленный вопрос.
Этот текст является примером входящего запроса. Он содержит 237 токенов.
Пример ответа GPT:
Добрый день! У нас в наличии есть шины для всех сезонов шириной от 175 до 265 миллиметров!
Этот текст представляет исходящий ответ, который содержит 42 токена.
Каждый запрос и ответ разбивается на токены. Токенизация зависит от длины слов, их структуры и использования знаков препинания. Для языков с более сложной морфологией (например, русского) токеном может быть часть слова или целое слово, в зависимости от контекста. Знаки препинания и пробелы также учитываются в токенизации.
Стоимость одного диалога рассчитывается на основе суммы входящих и исходящих токенов. В приведенном примере: 237 токенов (входящих) + 42 токена (исходящих).
Для точного расчета токенов вы можете использовать инструмент токенизации OpenAI.
Недоступен из РФ.
Тарифы зависят от используемой модели.
GPT-4 — это высокоточная модель с глубоким пониманием языка, способная решать сложные задачи. Она подходит для случаев, где важна точность и обработка сложных запросов.
GPT-4-turbo — это оптимизированная версия GPT-4, которая предлагает сбалансированное соотношение производительности и стоимости.
GPT-3.5-turbo — экономичная и функциональная модель, которая отлично подходит для большинства задач и поддерживает расширенное контекстное окно до 16 КБ. Она эффективна для обработки диалогов и взаимодействий в реальном времени.