ИИ-инфраструктура — это не купил видеокарту и погнал. Да, можно взять NVIDIA H100, поставить PyTorch и думать, что ты король.
Будешь как на Ferrari в час пик стоять.
Дмитрий Шиченко из Selectel вскрыл тему: без нормального пайплайна и баланса — твой сервер просто греет воздух. Инференс летит в жопу, если не продумать шину, память, архитектуру.
Они собрали свой AI-сервер и расписали принципы. Не для галочки — для реальной работы.
Коротко: железо — только половина дела. Вторая половина — как ты это упаковал и настроил. Хватит тупить.
Читай разбор: ссылка
Пошел ботать.
👉 Data Science | Machinelearning [ru]
Post #5741
1.6K

- 👎 7