Турецький сеошник Metehan Yesilyurt розробив інструмент для аналізу пузомірок з бази даних CommonCrawl.
https://metehan.ai/blog/cc-rank/ (тут опис)
На перший погляд якийсь булщіт, але це важлива інформація. Рекомендую розібратись.
CommonCrawl це відкрита база даних сайтів, де беруть інформацію багато сервісів, в тому числі LLM системи. Окрім того, що CC збирає контент, також вони збирають деяку іншу статистику по сайтам і надають це як окремий Host Index:
https://github.com/commoncrawl/cc-host-index
В цьому індексі є інформація про коди статусів, про кількість неангломовних сторінок на сайті, про PageRank (на основі веб-графу CC) та HC Rank (показник Harmonic Centrality). HC Rank показує, наскільки близько домен знаходиться до всіх інших доменів у веб-графі. Чим нижчий HC Rank, тим краще, і це означає, що цей сайт може швидко та легко отримати доступ до багатьох інших сайтів через меншу кількість переходів по посиланнях. Це показник центральності домену у структурі вебу.
Так як у LLM немає власного веб-графу сайтів і різних хостових показників, як у Google, вони можуть використовувати сторонні рішення для розуміння авторитету сайтів. В часності, пузомірки від CC.
Metehan розробив інструмент, який витягує ці пузомірки
https://webgraph.metehan.ai/
Працює для деяких доменів дуже повільно, але сама ідея прикольна. Можна порівнювати ранки для своїх доменів з ранками сайтів-конкурентів. А також можна перевіряти рейтинг експайред-доменів перед покупкою на аукционах.
Post #5616
2.84K