"Насколько мне известно, ни один из веб-краулеров/LLM не использует директиву "content-signal" в файле robots.txt. Она была разработана CDN и, насколько мне известно, не оказывает никакого влияния ни на один веб-краулер или LLM. Ее использование лишь увеличивает объем и необходимость дальнейшего обслуживания файла robots.txt. Вы также можете добавлять в файл robots.txt другие произвольные параметры; веб-краулеры будут использовать только те директивы, которые они поддерживают, и игнорировать остальные."
Что и следовало доказать.
