Забавно: новый Sonnet 5 на деле оказывается дороже Fable

Посмотрите на замеры Artificial Analysis Intelligence Index:

– Первая картинка: общая стоимость решения всего бенчмарка. Fable потратил ~5600$, а Sonnet 5 – больше 6к.

– Вторая картинка: собственно, причина происходящего. Sonnet 5 просто тратит ОЧЕНЬ много токенов. Примерно в два раза больше Fable и намного больше Opus 4.8.

– Третья картинка: средняя цена на задачу. Учитывая, что разница в стоимости большая, в среднем на задачу Fable все равно тратит немного больше, но на масштабе Sonnet начинает перевешивать (см первый пункт). А Opus 4.8 остается дешевле даже здесь.

Вот вам и хваленная экономия