Post #4690
563
LakoMoor Q-164M и Q-U-164M — новые модели от Q-Project, обучены с нуля на одной GPU. Q-164M — 164.6M параметров, претрейн на 13.1 млрд токенов (FineWeb-Edu). Тернарные веса {-1, 0, +1}, без обучаемой embedding-таблицы, и механизм точных вызовов инструментов: модель…
Это прикольный подход. Одобряю очень!
- 🤔 1