TGViewer
ivan zakutni ivan zakutni @neuralstack · 585 subscribers
Post #230 120
Вполне себе хороший фреймоворк по разработке и тестированию ML проектов —> тыц

Хорош он тем, что достаточно формальный, и сходу подчеркивает одной из проблем – коммуникативный барьер между членами команды продуктовой разработки :)

Хорошо отдает системностью - главные понятия которые ребята вводят это continuous negotiation и negotiation cards.

Цель - постоянно всех со всеми договаривать, особенно разработчиков и остальных стейкхолдеров. Договаривания происходят на каждом этапе через карточки, которые задают требования и ожидания от каждого картефакта вводя своим форматом онтологию для общения - круто!

Пусть в разработке AI систем основанных на больших моделях нет столько артефактов (ML модели постоянно обучают, дообучают и переобучают - каждый артефакт остается с карточкой при описываемом подходе), фреймворк все равно применим.

Например, карточкой переговоров можно оценивать каждую фичу или воркфлоу вашего «ассистента»

Ну а continuous negotiation это вообще про любую инженерию должно быть.
SEI Blog Introducing MLTE: A Systems Approach to Machine Learning Test and Evaluation | CMU Software Engineering Institute Machine learning systems are notoriously difficult to test. This post introduces Machine Learning Test and Evaluation (MLTE), a new process and tool to mitigate this problem and create safer, more reliable systems.
  • 🌭 1
More from @neuralstack
  1. Sep 3, 2026Приветствую. С момента последнего письма, к моему удивлению, слишком много людей написали…
  2. Aug 24, 2026Сейчас есть мало более хреновых решений, чем сесть гонять /goal loop как он есть "из короб…
  3. Aug 13, 2026Лучший harness — это вы и ваши AI-агенты harness – еще одно новояз словечко которое полнос…
  4. Aug 10, 2026да, кстати, там наконец-то вышел Haft v9. точнее он уже v9.0.2)) Дока тут. В течении каког…
  5. Aug 7, 2026Post #487
  6. Aug 6, 2026Post #486
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →