Режь длинный хвост!

Один интересный нюанс из видео про трансформеры YATI.

Коротко суть: Яндексоиды собрали большую модель (нейросеть), обучили её методом маскирования, а так же на вероятность клика, получили шикарный результат, попытались применить в рантайме (в боевом режиме) и офигели!

Модель получилась клёвая, но очень медленная, в том числе, потому, что таскает за собой слишком слишком большой хвост из содержимого каждой страницы.

Как ускорить время получения результата? Ну, как минимум, уменьшить объем анализируемых данных, допустим, учитывать первые 40 слов, а остальные выкинуть на фиг!?)

Нет, все не так просто. Что сделали разрабы? Они взяли модель с отрезанным хвостом, натренировали её на результатах большой модели. Получили следующие цифры, большая модель – 95,6% точности и 1 сек отклика, YATI продакшн – 95,4% точности и 0,1 сек отклика.

Так, что, получается, чтобы оценить релевантность вашей страницы YATI достаточно прочитать первые, ну допустим, 40 слов? Ну так погнали запихивать все в первый абзац, иначе Яндекс не поймёт всей той чудо оптимизации по облакам, которую вы так старательно выравнивали по ширине и глубине? 😉

Мнение скромного владельца этого уютного канала: да, имеет смысл поработать над первым абзацем, но упарываться запихивая туда всё и вся я бы не стал, тем более, что Яндекс учитывает и другие зоны документа, например, <а> </а>, так называемые зоны релевантности (слова слева и справа от ключа) и так далее. Кроме того, не забывайте про контекст, который YATI добывает с помощью механизма attention по близким фразам, а вы с помощью моих бесплатных ботов.

Ок, это понятно, а, что делать, если на сайте громадное многоуровневое меню? Оно как-то учитывается или нет?

Вопрос интересный и не однозначный, общаясь с SEO гуру разных мастей, я получал разные варианты ответов. Скажу свое скромное мнение: для Яндекса, отрезать шапку, футер и прочие сквозные элементы - простая задача, даже ваш скромный слуга как-то написал подобную скриптину на python за час.

Поэтому логично предположить, что сквозное меню в начале страницы - отдельная зона документа. Но это всего лишь мои догадки, основанные впрочем на логике и на анализе.