Все ли IP поисковых ботов содержатся в официальных диапазонах? В моих логах настроена валидация ботов через IP-range и через проверку PTR-записи, если IP не из диапазона.

У Google и Bing с этим пока ок, а вот у Яндекса — нет. Первый раз бота с IP не из официальных диапазонов обнаружил 2026-05-06, но активно начали краулить в июле.

Примеры IP:

45.148.65.20
45.138.0.33
45.148.65.21
45.138.0.32
45.148.65.27

На всякий случай проверил еще IP через официальный инструмент - он подтвердил, что это IP Яндекса. Чекнул через выдачу сторонние ли это боты или индексирующие - индексирующие.

Кому это важно? Как минимум тем, у кого на сайте есть защита от ботов — есть смысл добавить в вайт-листы дополнительные IP/ASN.

Например клаудфлер, вероятно, эти IP за реальных ботов не считает и блокирует (последние 2 скрина).