🚀 Виртуальный ассистент космонавта на борту МКС

Накануне Дня космонавтики рассказываем о кейсе внедрения российской ИТ-разработки за пределами орбиты.

Речь идет о виртуальном ассистенте космонавтов «Лучик», который помогает на борту МКС в логистике, инвентаризации и даже оказывает космонавтам психологическую поддержку.

❓История вопроса

Корпорация «Энергия» имени С.П. Королёва — ведущее предприятие, создающее ракетно-космическую технику: ракеты-носители, спутники, автоматические межпланетные станции, пилотируемые космические корабли и орбитальные станции.

В ходе выполнения полетной программы космонавты сталкиваются с большой нагрузкой на зрительную систему, в том числе из-за обработки объемного потока информации. Потребность в голосовом виртуальном ассистенте была вызвана необходимостью создать удобный интерфейс для доступа к документации, базам данных и информационным материалам. Кроме того, использование аудиальной информации может оказывать важную психологическую поддержку экипажу.

Также голосовой виртуальный ассистент незаменим в критических ситуациях автономной работы, когда нет связи с центром управления или аудиоканал является единственным способом для коммуникации.

🔎 Выбор решения

Для разработки виртуального ассистента был выбран продукт DialogOS от компании «Наносемантика», участника АРПП. Решение включает в себя всю необходимую функциональность для создания и обучения диалоговых роботов с возможностью коммуникации с пользователем в различных текстовых и голосовых каналах.

💻 Реализация:

Перед специалистами стоял ряд задач:
🔘 Развертывание платформы DialogOS на ПК, характеристики которого соответствуют характеристикам бортового компьютера для российского сегмента МКС
🔘 Создание виртуального ассистента «Лучик» на базе DialogOS, с добавлением модулей ASR и TTS для работы в голосовом канале
🔘 Обучение космонавтов работе с виртуальным ассистентом, участие в обработке и анализе полученных данных
🔘 Проведение исследований по влиянию условий космического полета на эффективность технологий распознавания и идентификации речи космонавта.

В результате удалось создать демонстрационный виртуальный ассистент «Лучик». Он способен вести разговор с космонавтом на различные темы, логировать и сохранять аудио-ответы для их последующей отправки на Землю.

Также в ассистенте реализован базовый навык по теме «логистика и инвентаризация». Среди других тем взаимодействия: планы работ, бортовые инструкции, управление операциями, психологическая поддержка.

Для исследования влияния космических условий на распознавание речи выполнялось моделирование шумовой обстановки в тренажерах специальных модулей. Проводились сеансы общения оператора с ассистентом «Лучик», включая запись аудио на ноутбук.

📋 Результат

Анализ полученных записей показал хорошую производительность системы автоматического распознавания речи (ASR). Несмотря на шум и изменение громкости речи, система продемонстрировала высокую точность распознавания, что подтверждает ее готовность к практическому использованию на борту МКС.

В настоящее время выполнена оценка работоспособности платформы DialogOS и ассистента «Лучика» на бортовых вычислительных средствах российского сегмента МКС, продолжается тестирование диалоговых схем и дальнейшее формирование базы знаний ассистента.

Подробнее читайте на нашем сайте

🖥 АРПП «Отечественный софт» | Подписаться