Вообще не трогаем тему обучения моделей и ответ чисто из ее весов. Исключительно про поиск по базам URL.
Почему ChatGPT, а не Claude или Перплексити? Потому что для 80% населения земли AI = ChatGPT. И у него несравненная доля рынка с другими системами.
Что говорит о создании индекса:
- Поведение ботов OpenAI часто похоже на краулеры, которые обходят страницы сайта.
Мини-эксперимент, который показывает, что ChatGPT использует сторонних SearchAPI провайдеров (не обязательно Google)
Я взял супер редкий поисковый запрос — найди курсы по "продажи seo услуг", по которому явно должен быть мой сайт.
Я убедился заранее, что OpenAI боты не посещали эту страницу и по логике индекса они не должны были быть найдены — https://skr.sh/sbx4fNQwTl1. С момента создания нового сайта школы там стоял счетчик мониторинга визитов AI ботов, который трекает их по IP и User-Agent.
Но эта страница есть в Google https://skr.sh/sbxTfqMtwr0 в индексе.
Простое и логичное объяснение — GPT ходит в Google.
Далее нормальное исследование на 3 тысячах промтах
И недавно я спарсил несколько тысяч промптов через скрейпер чата и параллельно делал запросы в Google, Bing, Brave с тем же ГЕО, проверял мобильные и десктопные выдачи, учитывал fan out если он был у chatgtp.
Результаты пересечений Google∩ChatGPT и с Brave∩ChatGPT получились в зависимости от ГЕО, типа запроса — между 30-60%. Пересечение с BING в 3 раза ниже в среднем.
Дополнительные SearchAPI
Если напарсить много промптов и потом посчитать, какие сайты чаще всего цитируются, то мы получим: Reddit, YouTube, Arxiv.org (если по промптам важны были исследования) и прочие крупные сайты, у которых есть свой хороший поиск по ним или по ним можно спокойно искать через оператор site:. И они сами по себе могут обеспечить примерно 20% URL для ответа.
Недавно смотрел сериал, где ГГ реально использует Reddit как поисковую систему, чтобы найти мнения людей по его проблемам. Испытал небольшой культурный шок.
Объяснение логики по сравнению с Google AIO
Если Google AIO идет просто в Google поиск и формирует ответы с него, то ChatGPT начинает использовать несколько поисковых подходов для поиска информации. Скорее всего, похожее поведение и у Google AI Mode.
Выводы
Факт 1 — ≈50% выдачи пересекается с Google, Brave.
Факт 2 — ≈25-30% объясняется сторонними API или через отдельный поиск типа site: по крупным сайтам.