Парсишь данные с популярных сайтов вроде Яндекс.Афиши и afisha.ru, а они начинают сопротивляться? Сталкивался когда-нибудь со странной блокировкой, когда нет ни логина, ни капчи, но просто не пускает?
Автор показывает, как обнаружить и обойти косвенные признаки бота: анализ TLS-отпечатков, настройка WebDriver с полной эмуляцией Chrome, работа с куками и временными задержками. Параллельно разбираются сигнатуры, которые могут выдать автоматический парсер, и как антибот-системы их вычисляют.
Понятное руководство для тех, кто занимается веб-скрейпингом и хочет разобраться в логике современных антибот-систем
🔥Ссылка на статью
Заметки Бэкендера & Max