Меня тут спрашивают за терминологии, я попробую объяснить.

Какая разница между валидацией и верификацией?

Самое лаконичное определение:
Validation: "Are we building the right product?"
Verification: "Are we building the product right?"

Валидация — проверка пользы. Вы можете не знать, правильный ли это ответ, но потом вы его как-то используете и проверяете, оказался ли он полезен. Решает ли он вашу задачу.
Верификация — проверка соответствия. Вы заранее (каким-то способом) знаете правильный ответ и убеждаетесь, что новый ответ — с ним совпадает.

Оценка изменения метрик — это валидация.
Прогон регрессионных тестов — это верификация.
А/Б-тестирование на живом трафике — это валидация.
Прогон на тестах соответствия какому-то стандарту/протоколу — это верификация.