👁️ А вы задумывались, как мозг кванта хранит все эти знания о бэктестах, стратегиях и ликвидации счетов?
Мозг хранит знания и воспоминания благодаря физическим изменениям в нейронных связях, называемым энграммами. Энграммные клетки памяти — это группы клеток мозга, которые, активируемые определенным опытом, изменяются, чтобы включать и тем самым удерживать информацию. Реактивация этих «строительных блоков» воспоминаний вызывает в памяти конкретные события, связанных с ними.
🧠 Недавно натолкнулись на классный ролик о том, как LLM (языковая модель) запоминает факты: https://www.youtube.com/watch?v=9-Jl0dxWQs8
Очень наглядная визуализация того, как запрограммировать знание:
- Где живут факты в LLM
- Обзор архитектуры трансформера и различных контекстов памяти
- Роль многослойного перцептрона и как можно смотреть на матрицы проекций: строки vs. столбцы
- Суперпозиция или какая должна быть размерность пространства, чтобы описать разнородные «перпендикулярные» факты
🫦 Кстати, на канале есть еще видео с полезными объяснениями о том, как работают модели.
Quant Researcher
Post #79
1.83K

- 🔥 5
- 😁 4
- 👍 2
- ❤ 1
- 🤔 1
- 😐 1