Получить IP-адрес прокси-сервера, используя Scrapy для сканирования ⇐ Python

[Anonymous]

Я использую Tor для сканирования веб-страниц.
Я запустил службы Tor и polipo и добавил

Код: Выделить всё

class ProxyMiddleware(object):   # overwrite process request   def
process_request(self, request, spider):
# Set the location of the proxy
request.meta['proxy'] = "127.0.0.1:8123"

Как я могу убедиться, что Scrapy использует другой IP-адрес для запросов?

Подробнее здесь: https://stackoverflow.com/questions/273 ... g-to-crawl