Google PageSpeed теперь проверяет llms.txt

В PageSpeed новый аудит: «Файл llms.txt соответствует рекомендациям». Файл llms.txt должен быть в формате Markdown и включать хотя бы один заголовок H1.

Почему появился: 7 мая Google добавил в Lighthouse новую категорию – Agentic Browsing. llms.txt проверяется как один из трёх параметров (вместе с accessibility tree и CLS). Agentic Browsing – это «SEO для агентов». Насколько ваш сайт может быть использован AI без участия человека.

Что такое llms.txt
Markdown-файл в корне сайта – структурированная карта важных страниц для AI-агентов. Идея простая: LLM не сканирует сайт как Googlebot, он забирает то, что легко найти. Если важные страницы спрятаны за JS и менюшками AI их игнорирует. Стандарт описан тут: llmstxt.org

Причем ни OpenAI, ни Google, ни Anthropic официально не подтвердили использование файла. А Джон Мюллер сравнил его с тегом keywords.

Где реально работает
AI-редакторы кода (Cursor, Windsurf, GitHub Copilot, Claude Code) при работе подтягивают документацию нужных библиотек. llms.txt говорит им какие страницы важные.

Делать или нет
Проще сделать за 10 минут, чем объяснять клиентам почему до сих пор его нет. Зависит от типа сайта. Если у вас SaaS с документацией для разработчиков, то да, там используется. Для остальных низкий приоритет.

➡️ Инструмент проверки разметки Markdown в файле llms.txt - https://dlaa.me/markdownlint/