3 инструмента для скрейпинга

ScrapeGraphAI, больше 30 тысяч звезд. Пишешь, что достать - получаешь данные, разложенные по полям. Нейросеть подключаешь любую, с локальной через Ollama выходит бесплатно.
github.com/ScrapeGraphAI/Scrapegraph-ai

Agent-Reach, больше 78 тысяч звезд. Дает клод коду читать X, Reddit и LinkedIn без платных API. Работает через куки залогиненного браузера, поэтому автор советует отдельный аккаунт: основной можно потерять.
github.com/Panniantong/Agent-Reach

Scrapling, больше 79 тысяч звезд. Сайт поменял верстку - сам находит нужные элементы на новом месте. По словам автора, проходит Cloudflare. Подключается к клоду через MCP.
github.com/D4Vinci/Scrapling