Что-то загорелся идеей сделать своего джарвиса
Сначала в мае навайбкодил распознавалку гс в виде скрытой цитаты. Потом придумал сделать txt-экспорт тг диалогов для отправки в нейросеть, добавил автолайк тгк и копипаст постов. Довольно скучно. Но нужно было с чего-то начать. Я чувствовал, что потенциал огромный, но тогда ещё не понимал, какой именно
Вышел guest mode, я вдохновился хорошей реализации в рисовалке и пришла идея доделать распознавалку гс с rich-форматированием с саммари нейронкой
Подумал подумал. И понял, что этого мало: допилил guest mode, чтобы теперь можно было обращаться к ассистенту как промптом к нейросети и получать ответы на общие вопросы, чтобы не объяснять очевидные факты в диалоге. Я понял, что этого тоже недостаточно. Вот тогда и началось счастье – пришло озарение, чего именно я ожидаю от ассистента
Я дал агенту доступ в интернет. Сделал отправку картинок из галереи. Затем дал полный доступ ко всем своим перепискам: выгрузил и проиндексировал более 3млн сообщений с личек (не групп/каналов!!!) в вк (2016-2022) и 2млн с тг (2022-2026) + автовыгрузка новых сообщений
Под капотом – OAuth codex cli с умным переключением моделей, с динамическим fast mode для отзывчивости в активных диалогах. Выбор между базовыми и расширенными ответами – gpt-5.6-sol <high|xhigh|max>. Компромисс скорость-цена-качество. Ну и конечно нативные эмбеддинги в постгресе, куда без них. Собираются они через фронтирную модельку OpenAI
Хочу больше! Сделал несколько режимов работы с информацией: с упором в анализ диалога, анализ интернета и комбинирование. Дал ему философию "третьего собеседника", который независимо от моих желаний отвечает на вопросы при теге. Он нацелен лишь на объективные ответы и взгляд на диалог со стороны
Ещё больше! Добавил возможность самостоятельной генерации картинок и возможность поиска картинок в интернете, если так будет удобнее отвечать. Он сам определяет, когда, что и как использовать. Джарвис, ты здесь?
Всё. Хватит. Фантазия и мыслетопливо кончились. Напоследок добавил ему разные типы личностей (настроений, так скажем), которые автоматически подхватываются в зависимости от контекста и настроя вопроса
А ведь когда-то я в полушутку упоминал цифровизацию личности
Некст стейдж: интеграция с кастомным gbrain. А что там уже придумается – даже не представляю
Есть мысли по овернекст стейдж, но пока морально не готов к такой бесшовности реального общения и нейросетей. Например, фоновый анализ диалогов, помощник в общении с людьми – алерты о событиях, даты и обещания. Или анализ тгк на новоинформацию, чтобы получать только отфильтрованные, проверенные и полезные новости. А потом до кучи прикрутить голосовое управление и управление умным домом. В общем, есть где разгуляться
Можно и киберпанк устроить: отдать новые знакомства с людьми на первофильтр через такого бота с автообщением, с трекингом паттернов общения. Техническая возможность полностью имеется, но такие идеи, наверное, уже перебор
А всё началось с того, что я просто забывал некоторые истории, рассказанные собеседником. Сейчас это выглядит как "что рассказывал <X> про <Y>". И в ответ идет не просто общая инфа, а со всеми доказательствами, ответвлениями по разным ситуациям и датам; цитатами фраз, источниками информации (гс/кругляш/текст) и приватизацией информации между диалогами, но с возможностью глобального поиска любой инфы при общении в лс с ботом
Лень [запоминать инфу] – двигатель прогресса
Думаю, это начало чего-то большего. Идеи на такие серьезные доработки приходят далеко не сразу. После новых версий продукта всегда нужно ими попользоваться и понять, чего не хватает. Например, от прошлой итерации до этой прошло 2 месяца. А до следующей... даже не знаю :)
Как карта ляжет, как DMN скажет 🤯
Когда-нибудь телега для этого петика станет лишь одним из источников информации.
Общение в тг – лишь одним из способов взаимодействия.
А поиск по диалогам – лишь базовым функционалом.
Делаем своего Hermes?
Post #77
1.3K