Внезапное. Алан Смит делится интересным кейсом. В какой-то момент органический трафик из Google на сайт ушёл в 0. И причина, скорее всего, в том, что у сайта нет
robots.txt — файла в корне сайта, который должен давать инструкции роботам, куда можно ходить, а куда нельзя ходить.Дальнейший ресёрч показал, что вообще-то в поддержке есть целое видео про этот нюанс.
Честно говоря, я с таким никогда не сталкивался, потому что у меня для каждого личного проекта
robots.txt на автомате копируется из предыдущего. Но удивительно, что если гуглобот не получил явное разрешение погулять по сайту, то он не наглеет и действительно не идёт гулять. Логично. Но удивительно.https://www.alanwsmith.com/en/37/wa/jz/s1/
