"Когда запрос поступает от проверенного ИИ-краулера, Cloudflare считывает HTML-код ответа. Если присутствует несамоссылающийся канонический тег, Cloudflare отправляет запрос 301 Moved Permanently на канонический URL перед возвратом ответа. Трафик от пользователей, индексирование поисковыми системами и другой автоматизированный трафик остаются без изменений."
Post #4788
584
Команда Cloudflare объявила о запуске функции редиректов для обучения ИИ, поскольку ИИ-краулеры игнорируют директиву canonical:
- 👍 2