⠀
Раньше Hermes жил в экране. Теперь говоришь «Hey Hermes» — агент отвечает голосом.
⠀
В CLI и TUI:
/wake on. В Desktop — значок уха. Имя распознаётся локально: до вызова звук остаётся на компьютере. По умолчанию выключено.⠀
Разные имена открывают разные профили. В Discord Hermes входит в голосовой канал и отвечает вслух.
⠀
Сейчас Hermes переводит речь в текст, отдаёт задачу основной модели, затем озвучивает результат. Модель вроде Sol помнит контекст, ищет файлы и использует инструменты.
⠀
Следом я бы подключил
GPT Realtime. Он слышит живую речь и перебивания. Sol остаётся мозгом; Realtime становится ушами и голосом.⠀
Sol можно убрать совсем, но готовой кнопки пока нет. Это нужно соединить в коде.
⠀
Официальный плагин Google Meet уже говорит через OpenAI Realtime и замолкает при перебивании. Пока он озвучивает готовые ответы Hermes. Дальше ту же механику можно подключить к «Hey Hermes», затем к Zoom.
Хорошая задача на ближайшие дни. Допилить так, чтобы Hermes ходил на наши зумы и говорил голосом, когда к нему обращаются.
⠀
Анонс Teknium · Документация · Мост Realtime
Среда внедрения ИИ:
Внедрить | ТГ | ВК | YouTube