✔️ Scrapling v0.4 - веб-скрапинг на Python без боли и переписывания кода
Вышел Scrapling 0.4 - адаптивный Python-фреймворк для парсинга, который работает от одного запроса до полноценных масштабных краулеров.
Главная проблема скрапинга знакома всем:
сайт обновился - селекторы сломались - всё перестало работать.
Scrapling решает это по-умному.
Парсер учится на изменениях страницы и автоматически находит нужные элементы, даже если структура сайта изменилась.
Что внутри:
- обход современных антибот-систем (включая Cloudflare Turnstile) из коробки
- встроенный spider для параллельных многосессионных обходов
- pause/resume для долгих краулов
- автоматическая ротация прокси
- запуск масштабного парсинга в несколько строк Python
Плюс:
- высокая скорость
- статистика в реальном времени
- потоковая обработка данных
Фактически это уровень Scrapy + антибот + адаптивный парсер, но с гораздо более простым стартом.
Инструмент сделан скраперами для скраперов - и подойдёт как для быстрых задач, так и для production-краулеров.
https://github.com/D4Vinci/Scrapling
@pythonl
Post #5387
8.05K



- 👍 19
- ❤ 10
- 🔥 6