TGViewer
Техножнец Техножнец @technojnec · 5.7K subscribers
Post #4688 1.15K
Техножнец ROTOR: память с четырьмя часами Языковая модель без attention · 33.6M параметров · с нуля на PG19 Рекуррентная сеть сжимает всё прочитанное в один вектор с одной постоянной времени: давнее растворяется. Трансформер помнит всё, но платит растущим KV-кешем.…
Комментариев нет, т.к. все пошли повторять 😃
  • 🫡 14
  • 👏 1
Open in Telegram All posts from @technojnec
More from @technojnec
  1. Sep 29, 2026Это прикольный подход. Одобряю очень!
  2. Sep 29, 2026Q-164M и Q-U-164M — новые модели от Q-Project, обучены с нуля на одной GPU. Q-164M — 164.6…
  3. Sep 29, 2026ROTOR: память с четырьмя часами Языковая модель без attention · 33.6M параметров · с нуля…
  4. Sep 29, 2026Так так так...
  5. Sep 28, 2026Rukallama V11+ может: 1) Писать код Basic , причём рабочий и по запросу. 2) Писать код Pyt…
  6. Sep 28, 2026Ну всё...теперь я снова приписчик всяких умных ллм. Наконец-то мои кривые наработки будут…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →