Метрики для оценки эффективности ИИ-поиска

Базово мы смотрим на следующие значения:

Precision — доля релевантных товаров в выдаче топ-k товаров. Значения k — количество товаров, на которое смотрим, определяется совместно с бизнесом исходя из UX, аналитических данных по кликам по товарам и количества релевантных товаров в каталоге.

nDCG — релевантность в соотвествии с сортировкой в выдаче топ-k товаров. Позволяет оценить, насколько сортировка по релевантности соответствует «идеальной».

Category coverage — показывает, какое разнообразие в категориях/подкатегориях ожидается в выдаче по широкому запросу. Такая оценка нужна, например, чтобы по запросу «вкусное под кино» получить не только поп-корн, но и чипсы, пирожное, колу и свиные уши.

А какие метрики вы считаете базовыми для оценки эффективности поиска для вашего бизнеса? Обсудите с нашими экспертами