Как обойти защиту BOT/DDOS CloudFlare при скраске? ⇐ Python

[Anonymous]

Иногда я использовал веб-страницу электронной коммерции, чтобы получить информацию о ценах на продукт. Я не использовал скребок, построенный с использованием Scrapy , и вчера пытался его использовать - я сталкиваюсь с проблемой с защитой ботов. < /p>

использует защиту DDOS CloudFlare, которая в основном использует оценку JavaScript для фильтрации браузеров (и, следовательно, скрещин) с отключенными JS. Как только функция оценивается, сгенерируется ответ с рассчитанным числом. В свою очередь, Service отправляет два файла cookie для аутентификации, которые прикреплены к каждому запросу, позволяя обычно заполнять сайт. Вот описание того, как это работает. Полем Я не уверен, как интегрировать его в скрапу, хотя. Или, может быть, есть более разумный способ без использования исполнения JS? В конце концов, это форма ... < /p>

Я бы абрикации любой помощи. < /P>

Подробнее здесь: https://stackoverflow.com/questions/332 ... -in-scrapy