🧠 Запросы AI-моделям на русском обходятся заметно дороже, чем на английском

Один и тот же текст токенизаторы режут на разное число токенов, а платят именно за них. Для русского кусочки у большинства моделей мельче, поэтому тот же смысл занимает больше токенов. Больше всего у Claude Opus 5.

Причина в том, на каких текстах обучали токенизатор: если русского там мало - слова дробятся.

Кэпитал News

@Drops Daily

• • • • • • • • • • • • • • • • • • • •
⚡️ Продать крипту легально, без P2P и левых дропов ⚡️
Нужные сервисы и скидки
• • • • • • • • • • • • • • • • • • • •