TGViewer
Python/ django Python/ django @pythonl · 58.7K subscribers
Post #5387 8.05K
✔️ Scrapling v0.4 - веб-скрапинг на Python без боли и переписывания кода

Вышел Scrapling 0.4 - адаптивный Python-фреймворк для парсинга, который работает от одного запроса до полноценных масштабных краулеров.

Главная проблема скрапинга знакома всем:
сайт обновился - селекторы сломались - всё перестало работать.

Scrapling решает это по-умному.

Парсер учится на изменениях страницы и автоматически находит нужные элементы, даже если структура сайта изменилась.

Что внутри:

- обход современных антибот-систем (включая Cloudflare Turnstile) из коробки
- встроенный spider для параллельных многосессионных обходов
- pause/resume для долгих краулов
- автоматическая ротация прокси
- запуск масштабного парсинга в несколько строк Python

Плюс:
- высокая скорость
- статистика в реальном времени
- потоковая обработка данных

Фактически это уровень Scrapy + антибот + адаптивный парсер, но с гораздо более простым стартом.

Инструмент сделан скраперами для скраперов - и подойдёт как для быстрых задач, так и для production-краулеров.

https://github.com/D4Vinci/Scrapling

@pythonl
  • 👍 19
  • ❤ 10
  • 🔥 6
More from @pythonl
  1. Sep 27, 2026🐍 В Python 3.15 решили мягко «похоронить» re.match() re.match() никуда не удаляют, но для…
  2. Sep 26, 2026⚡️ Qwen-Image за 6 шагов: Viggle ускорили генерацию и редактирование в 5 раз Viggle выложи…
  3. Sep 25, 2026🖥 Заголовки безопасности для FastAPI - одной строкой 🛡️ fastapi-security-headers добавля…
  4. Sep 24, 2026Линтер для инструкций ИИ-агентов LintLang проверяет AGENTS.md, CLAUDE.md, SKILL.md, описан…
  5. Sep 24, 2026‼️Ваши данные уже слиты. Вопрос лишь в том, кто и как ими воспользуется. Только в 2025 год…
  6. Sep 24, 2026⚡️ OmniVoice - открытая модель озвучки с поддержкой более 600 языков. Она умеет клонироват…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →