Для этого часто используются роботы, а основой для их создания может послужить scrapy.
Установка:
pip install scrapy
Первым делом, нам нужно подготовить проект. Вводим в терминал scrapy startproject name, где на место name вводим имя будущей папки.Окей, теперь создаём
quotes_spider.py в name/spiders. Далее вводим туда код из примера выше (его можно найти тут).Теперь просто запускам «паучка »с помощью
scrapy crawl quotes и наблюдаем за результатом.#миниурок #scrapy