Как Kapitsa.AI взаимодействует с человеком

Вы видели проверку ИИ-двойника на взаимодействие, а теперь расскажем все детали этого процесса в деталях. Происходит это по следующему алгоритму:

— Пользователь подходит и произносит триггерное слово: к двойнику нужно обратиться Сергей или Сергей Петрович.

— ИИ-двойник начинает слушать человека. Если время тишины составляет 1,5 секунды (то есть пользователь не издает никаких звуков за это время), то он перестает слушать и передает данные языковой модели. Он транскрибирует речь в реальном времени, пока человек говорит, поэтому процесс происходит быстро.

— LLM обрабатывает вопрос и начинает по кусочкам выдавать ответ в аудиомодуль, не дожидаясь, пока ответ сгенерируется полностью. Пока ИИ-двойник говорит первую часть, уже готова вторая, и так далее — так речь получается цельной.

— Kapitsa.AI отвечает и снова ожидает триггерного слова, чтобы продолжить диалог.

— В тестовом режиме после каждого ответа он «обнуляется» — то есть не запоминает контекст. Поэтому глубокий содержательный диалог пока не получится.

#десятилетиенауки #МинобрнаукиРоссии #популяризациянауки #KapitsaAI