Заставить ИИ-ассистента заговорить в AR - один день работы. Заставить его выглядеть живым - полтора месяца и шесть провальных подходов.

Написали честный технический разбор о том, как делаем AR AI-ассистентов внутри AR Spatially - с кодом, цифрами и всеми тупиками, в которые заходили.

Разобрали:

▫️ Почему персонаж иногда улыбался и молчал. Оказалось, в Realtime API вызов функции и речь физически не могут идти одним ходом - и один незаметный обязательный тул ломал весь диалог

▫️ Как мы шесть раз переделывали липсинк. От случайного дёргания рта до костной анимации, которую снесли целиком за один день — и только потом нашли рабочую схему

▫️ Почему тело персонажа живёт своей жизнью отдельно от того, что он говорит

Отдельно рассказали - как одна фраза в промпте персонажа превратилась в реальный баг на проде.

Прочитать целиком можно тут 👉 https://arspatially.com/blog/ai-character-gestures-lipsync-realtime-api

Для тех, кто сам делает голосовых AI-агентов - есть пошаговый материал и конкретные тайминги, которые можно забрать себе.