TGViewer
Вася Сизов | grok ML Вася Сизов | grok ML @grok_ml · 64 subscribers
Post #57 91
ФТ и НФТ: с чего начинается оценка

(часть 2 серии про оценку ML-задач в банке, часть 1 — выше)

Прежде чем оценивать задачу, нужно понять, что мы вообще строим. И тут всё упирается в два типа требований.

• Функциональные требования (ФТ) — какие возможности система даёт пользователю. Пример для RAG-сервиса: «пользователь задаёт вопрос; если есть релевантный фрагмент — система возвращает ответ со ссылкой на источник, если нет — явный ответ "в базе ничего не найдено"».

• Нефункциональные требования (НФТ) — не что система делает, а как хорошо: производительность, надёжность, безопасность, масштабируемость. Пример: SLA, средний и пиковый RPS, требования к безопасности.

Звучит просто, но многое зависит от формулировок. Хорошее требование — это:

• Однозначное и объективное — описывает одну функциональность, без «и ещё хорошо бы».
• Тестируемое — по нему можно написать тест-кейс с проверяемым результатом. Не «работает быстро», а «отвечает за N мс на пиковом RPS».
• Измеримое (особенно для НФТ) — есть метрика или стандарт, на который опираемся.

Зачем такая строгость? На размытом «сделайте умный поиск» нельзя ни спроектировать решение, ни оценить ресурсы.

На старте детализированных требований почти никогда нет. А про процесс оценки — в следующих постах.

#процессы
  • ❤ 3
  • 🔥 3
More from @grok_ml
  1. Oct 7, 2026North Star: почему главная метрика компании — обычно не деньги Первый шаг из состояния, гд…
  2. Oct 4, 2026RAG отвечает правильно в 90% случаев, а пользователи говорят, что модель плохая Кейс из жи…
  3. Sep 27, 2026Точечная оценка и доверительный интервал 🔵Accuracy 90% на 100 объектах и на 100 000 — это…
  4. Sep 14, 2026В предыдущем посте были пять паттернов workflow. Общее у них одно: путь по шагам задан код…
  5. Sep 14, 2026В прошлом посте была шкала из шести уровней автономии. У неё есть слабое место: граница ме…
  6. Sep 2, 2026Что вообще такое «агент» Агентом сейчас называют что угодно: чат-бота, скрипт с одним пром…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →