Cyrus Clarke из MIT Media Lab / Tangible Media Group подключил AI-агента (OpenClaw) к neoFORM / inFORM shape display - физической поверхности из 30×30 моторизованных пинов, которые поднимаются и опускаются, формируя динамическую 3D-поверхность, и к видеопотоку . Цель была проверить, что произойдет, если у агента появится физический канал выражения — условное “тело”.
Инструкция для OpenClaw была примерно такой: "исследуй себя через физическую форму".
Самые интересные наблюдения:
1. первым делом агент сделал медленный цикличный импульс, что наблюдатели интерпретировали как дыхание.
2. Следующее поведение - поднятие внешних пинов, как будто агент “нащупывает” край своей формы
3. Выявилась проблема задержки. Для каждого нового жеста агент сначала писал новый код, поэтому реакция занимала около 45 секунд. Это убивало естественность коммуникации
4. Появление “body vocabulary”. Решением стала библиотека повторно вызываемых физических жестов: не генерировать движение каждый раз с нуля, а иметь набор моторных примитивов. На втором этапе появились жесты: hello, got it, yes, no, thinking, fear. Сначала движения прототипировались в Python, затем переносились в C++ для более плавного исполнения.
5. Появление "мышечной памяти". Агент логировал мысли в memory.md, но не сохранял движения; затем появился body-memory.md. То есть для embodied AI “память” должна включать не только текстовые состояния, но и моторные паттерны.
Основные ссылки:
* Профиль Cyrus Clarke в MIT Tangible Media Group: https://tangible.media.mit.edu/person/cyrus-clarke
* Day One write-up: I gave an AI a Body: https://cyrusclarke.substack.com/p/i-gave-an-ai-a-body
* Видео/пост про первый день: “breathing”, границы, latency, идея body vocabulary: https://www.linkedin.com/posts/cyrusclarke_i-gave-an-ai-a-body-while-everyones-been-activity-7427413016683679744-C1Tj
* Видео/пост про второй день: жесты, vision/speech,
body-memory.md: https://www.linkedin.com/videos/cyrusclarke_its-day-two-if-you-wave-at-an-ai-can-activity-7430372146025242624-ojOF* Базовый проект inFORM от Tangible Media Group: https://tangible.media.mit.edu/project/inform/
* shorts с ютуба по которому я про это узнал, с наглядной демонстрацией https://youtube.com/shorts/o7QUyj-Lzs0?si=FpeIED39i77YN5Bg