Как сделать так, чтобы агент не отлетал на антиботе.
Ситуация знакомая: YouTube, Instagram, Amazon и куча других сайтов агрессивно режут любые автоматические запросы. Итог один из двух: агент фейлится или начинает “додумывать” ответ, потому что данных не получил.
Это вылезает везде:
▪️ресерч-агенты тянут новости и статьи
▪️sales-агенты скрейпят LinkedIn на лиды
▪️e-commerce-агенты мониторят цены конкурентов
▪️соцмедиа-агенты анализируют тренды
На видео показан быстрый тест в действии.
- слева: попросил Claude вытащить данные с YouTube. Без спец. тулов он попытался через yt-dlp и упал
- справа: подключил MCP-сервер Bright Data и получил то же самое одним вызовом инструмента
Самое интересное под капотом: Bright Data берет на себя прокси-ротацию, капчи и антибот-обход, а для агента это выглядит как “обычный вызов инструмента”.
MCP-сервер опенсорсный и есть фри-тир на 5000 запросов в месяц, можно спокойно потыкать на своих кейсах.
Post #2448
4.84K