И вновь "к вопросу о". Как загрузить данные со множества страниц вебсайта - впоследствии их можно использовать хотя бы для тренировки ИИ https://www.scrapingbee.com/blog/how-to-scrape-all-text-from-a-website-for-llm-ai-training/