Cloudflare изменил доступ ИИ-ботов к сайтам: как проверить настройки и не закрыть поиск #habr
https://habr.com/ru/articles/1091182/
Tags: Cloudflare, GPTBot, ClaudeBot, OAI-SearchBot, robots.txt, ИИ-краулеры, блокировка ботов, WAF, Cloudflare AI, user agent
Author: ig_novvv
Post #324943
78