Парсинг данных для биржи и новостной ленты


Необходимо автоматизировать сбор информации для двух разделов экологической платформы.
1. Биржа отходов
Сбор объявлений о покупке, продаже, вывозе и утилизации отходов. Поля: название, тип предложения, ФККО и класс опасности (если указаны), объём, цена, регион, организация, дата и ссылка на источник.
2. Новостной блок
Сбор отраслевых новостей, изменений законодательства, материалов и технологиям переработки и анонсов мероприятий. Поля: заголовок, краткое описание, категория, дата, ссылка на первоисточник.
Источники: открытые реестры, торговые площадки, доски объявлений, информационные сайты и публичные Telegram-каналы.
Требования:
— аудит доступности и условий сбора данных;
— автоматическое обновление по расписанию;
— очистка, нормализация и удаление дубликатов;
— передача данных через API или в БД платформы;
— фильтры по региону, категории и дате;
— логи ошибок и уведомления о сбоях;
— исходный код и инструкция по запуску.
Без обхода защит и закрытого доступа. Соблюдение прав на контент и требований к персональным данным.
В отклике: примеры работ, стек, сроки и стоимость аудита, пилота и разработки, условия поддержки.
Работа и оплата по этапам. Бюджет уточняем после аудита.

=============
Бюджет: 100000 - 200000
Проект: 3267631
Автор: levchukov1
🤖 Kwork Бот