🔎 Как поисковики научились понимать, что мы от них хотим
Сегодня можно написать в поиске длинный разговорный вопрос, допустить опечатку, перепутать форму слова — и все равно получить подходящие страницы, а иногда и готовый ответ со ссылками. Но так было далеко не всегда.
В 1990-х поисковики в основном искали буквальные совпадения слов. Если запрос был сформулирован неудачно, его приходилось переписывать вручную. Затем системы начали учитывать не только наличие слов на странице, но и ее авторитетность: в 1998 году Google сделал ставку на PageRank и связи между сайтами.
Дальше поиск постепенно научился:
🔹 исправлять опечатки и учитывать формы слов, синонимы и регион пользователя;
🔹 ранжировать страницы с помощью машинного обучения — например, MatrixNet в «Яндексе»;
🔹 распознавать не просто слова, а объекты и связи между ними — как Knowledge Graph у Google;
🔹 сопоставлять длинные разговорные запросы с нужными понятиями благодаря RankBrain, «Палеху», «Королёву» и Neural Matching;
🔹 учитывать порядок слов, предлоги и отрицания с помощью BERT и YATI;
🔹 работать сразу с несколькими языками и форматами информации, а затем формировать связный ответ на основе найденных источников.
Современный поиск — это уже не один алгоритм, а целая система. Один механизм исправляет запрос, другой определяет его смысл, третий оценивает качество страниц, четвертый учитывает геопозицию, а пятый может собрать итоговый ответ.
Как поисковики прошли путь от простого совпадения ключевых слов до нейросетей и генеративных ответов — читайте в нашей новой статье:
👉https://dzen.ru/a/aprOSohpt1YsbGt7
Post #363
27