# Брояч на токени

Бройте токените в подканa или документ с точните OpenAI токенизатори (o200k_base за GPT-4o и по-нови модели, cl100k_base за GPT-4 и GPT-3.5) и вижте броя знаци и думи, както и приблизителна оценка за други модели. Полезно за спазване на ограниченията на контекстния прозорец и оценяване на разходите за API.

## Често задавани въпроси

### Какво е токен?

Езиковите модели четат текста като токени — части от думи, получени от токенизатор. В английския един токен е средно около четири знака или три четвърти от дума, но кодът, числата и другите езици използват повече.

### Кои токенизатори дават точен резултат?

o200k_base (GPT-4o, GPT-4.1, o1, o3, o4-mini), cl100k_base (GPT-4, GPT-3.5 Turbo, text-embedding-3), p50k_base и r50k_base (по-старите модели GPT-3 и Codex), преброени с js-tiktoken — JavaScript порт на tiktoken на OpenAI.

### А какво ще кажете за Claude, Gemini или Llama?

Те използват собствени токенизатори. Инструментът показва евристична оценка от един токен на всеки четири знака, която е близка за английски текст; за точни стойности използвайте API за броене на токени от доставчика.

### Броят ли се специалните токени?

Да. Текст, който изглежда като специален токен, например <|endoftext|>, се брои като такъв — както би го отчел API.

### Броят ли се съобщенията в чата с допълнителни токени?

Не. Броят обхваща само текста. Чат API добавят по няколко токена за всяко съобщение за роли и форматиране.

### Съхранява ли се текстът ми?

Не. Текстът се токенизира само за тази заявка.

Вашата реклама тук?

[Пишете ни](mailto:hi@dennn.is?subject=%D0%A0%D0%B5%D0%BA%D0%BB%D0%B0%D0%BC%D0%B0%20%D0%B2%20OneClick%20Pro)

[Реклама 433 инструмента за вашите AI агенти чрез един MCP сървър.](https://multitaskai.com/bg/?ref=oneclickpro)
