Все кто используют API инпут-аутпут моделей в своих продуктах и задачах, выделите прям целый полный день на то чтобы научиться правильно управлять технической эффективностью материала который подается на входе модели на каждом этапе.
Разница между «просто попросить вставить туда модель чтобы она делала Х по триггеру Y” и сделать то же самое но еще на сутки заебавшись в эффективность - может быть даже в 1000 раз дешевле/эффективнее :))
Я просто хуею с того как это все оптимизируется)
Особенно это важно на фронтирных моделях где действие может изи стоить бакс.
Я уже много-много раз таким образом превратил бакс в 1 цент.
Наверно это сродни тому что раньше делали админы сервачные) Когда выяснялось что можно на одной ноде крутить миллион запросов а не один запрос на миллионе нод что бы это нахуй ни значило (помню просто кодерские праздники в Авиасале по этому поводу).
Прям реально не игнорьте этот аспект. Если вы не можете на эту тему диссертацию написать - надо сидеть и изучать) Продовый AI гораздо дешевле чем кажется на первый взгляд) И на десятый.
Post #3710
2.01K
- 💯 18
- ❤ 12
- 🔥 5
- ❤🔥 1