Постоянно сканируется 0 страниц (со скоростью 0 страниц/мин)Python

Программы на Python
Ответить
Anonymous
 Постоянно сканируется 0 страниц (со скоростью 0 страниц/мин)

Сообщение Anonymous »


Я новичок в Scrapy, поэтому следую этому руководству . и он использует этот сайт https://books.toscrape.com

Я вызываю свой код, выполняя scrapy сканирование «имя паука», как мне сказали в руководстве, я не знаю, есть ли другой способ его запустить.< /п> Мой паук

импортировать Scrapy класс FirstspiderSpider(scrapy.Spider): name = "первый паук" разрешенные_домены = ["books.toscrape.com"] start_urls = ["https://books.toscrape.com"] def parse(self, ответ): книги = response.css('article.product_pod') для книги в книгах: урожай{ 'имя': book.css('h3 a::text').get(), 'цена': book.css('.product_price .price_color::text').get(), 'url': book.css('h3 a').attrib['href'], } Вот что он возвращает:
2024-01-04 20:20:17 [scrapy.utils.log] ИНФОРМАЦИЯ: Scrapy 2.11.0 запущен (бот: первый) 2024-01-04 20:20:17 [scrapy.utils.log] ИНФОРМАЦИЯ: Версии: lxml 4.8.0.0, libxml2 2.9.13, cssselect 1.2.0, parsel 1.8.1, w3lib 2.1.2, Twisted 22.10.0 , Python 3.10.11 (v3.10.11:7d4cc5aa85, 4 апреля 2023 г., 19:05:19) [Clang 13.0.0 (clang-1300.0.29.30)], pyOpenSSL 23.3.0 (OpenSSL 3.1.4, 24 октября 2023 г.), криптография 41.0.7, Платформа macOS-13.4.1-arm64-arm-64bit 2024-01-04 20:20:17 [scrapy.addons] ИНФОРМАЦИЯ: Включены дополнения: [] 2024-01-04 20:20:17 [asyncio] ОТЛАДКА: использование селектора: KqueueSelector 2024-01-04 20:20:17 [scrapy.utils.log] ОТЛАДКА: использование реактора:wwisted.internet.asyncioreactor.AsyncioSelectorReactor 2024-01-04 20:20:17 [scrapy.utils.log] ОТЛАДКА: использование цикла событий asyncio: asyncio.unix_events._UnixSelectorEventLoop 2024-01-04 20:20:17 [scrapy.extensions.telnet] ИНФОРМАЦИЯ: Пароль Telnet: bd3b6a36be9d6899 2024-01-04 20:20:17 [scrapy.middleware] ИНФОРМАЦИЯ: Включенные расширения: ['scrapy.extensions.corestats.CoreStats', 'scrapy.extensions.telnet.TelnetConsole', 'scrapy.extensions.memusage.MemoryUsage', 'scrapy.extensions.logstats.LogStats'] 2024-01-04 20:20:17 [scrapy.crawler] ИНФОРМАЦИЯ: Переопределенные настройки: {'BOT_NAME': 'первый', «FEED_EXPORT_ENCODING»: «utf-8», 'NEWSPIDER_MODULE': 'first.spiders', 'REQUEST_FINGERPRINTER_IMPLEMENTATION': '2.7', 'ROBOTSTXT_OBEY': Верно, 'SPIDER_MODULES': ['first.spiders'], 'TWISTED_REACTOR': 'twisted.internet.asyncioreactor.AsyncioSelectorReactor'} 2024-01-04 20:20:17 [scrapy.middleware] ИНФОРМАЦИЯ: Включено промежуточное ПО загрузчика: ['scrapy.downloadermiddlewares.robotstxt.RobotsTxtMiddleware', 'scrapy.downloadermiddlewares.httpauth.HttpAuthMiddleware', 'scrapy.downloadermiddlewares.downloadtimeout.DownloadTimeoutMiddleware', 'scrapy.downloadermiddlewares.defaultheaders.DefaultHeadersMiddleware', 'scrapy.downloadermiddlewares.useragent.UserAgentMiddleware', 'scrapy.downloadermiddlewares.retry.RetryMiddleware', 'scrapy.downloadermiddlewares.redirect.MetaRefreshMiddleware', 'scrapy.downloadermiddlewares.httpcompression.HttpCompressionMiddleware', 'scrapy.downloadermiddlewares.redirect.RedirectMiddleware', 'scrapy.downloadermiddlewares.cookies.CookiesMiddleware', 'scrapy.downloadermiddlewares.httpproxy.HttpProxyMiddleware', 'scrapy.downloadermiddlewares.stats.DownloaderStats'] 2024-01-04 20:20:17 [scrapy.middleware] ИНФОРМАЦИЯ: Включено промежуточное ПО паука: ['scrapy.spidermiddlewares.httperror.HttpErrorMiddleware', 'scrapy.spidermiddlewares.offsite.OffsiteMiddleware', 'scrapy.spidermiddlewares.referer.RefererMiddleware', 'scrapy.spidermiddlewares.urllength.UrlLengthMiddleware', 'scrapy.spidermiddlewares.глубина.DepthMiddleware'] 2024-01-04 20:20:17 [scrapy.middleware] ИНФОРМАЦИЯ: Включены конвейеры элементов: [] 2024-01-04 20:20:17 [scrapy.core.engine] ИНФОРМАЦИЯ: Паук открыт 2024-01-04 20:20:17 [scrapy.extensions.logstats] ИНФОРМАЦИЯ: просканировано 0 страниц (со скоростью 0 страниц/мин), очищено 0 элементов (со скоростью 0 элементов/мин). 2024-01-04 20:20:17 [scrapy.extensions.telnet] ИНФОРМАЦИЯ: консоль Telnet прослушивает 127.0.0.1:6023 2024-01-04 20:20:17 [scrapy.core.engine] ОТЛАДКА: просканировано (404) (ссылка: нет) 2024-01-04 20:20:18 [scrapy.core.engine] ОТЛАДКА: просканировано (200) (референт: нет) 2024-01-04 20:20:18 [scrapy.core.engine] ИНФОРМАЦИЯ: Закрытие паука (завершено) 2024-01-04 20:20:18 [scrapy.statscollectors] ИНФОРМАЦИЯ: Сброс статистики Scrapy: {'downloader/request_bytes': 456, 'загрузчик/request_count': 2, 'загрузчик/request_method_count/GET': 2, 'загрузчик/байты_ответа': 5802, 'загрузчик/response_count': 2, 'загрузчик/response_status_count/200': 1, 'загрузчик/response_status_count/404': 1, «прошедшее_время_секунды»: 0,712828, 'finish_reason': 'закончено', 'finish_time': datetime.datetime(2024, 1, 5, 4, 20, 18, 173899, tzinfo=datetime.timezone.utc), 'httpcompression/response_bytes': 51447, 'httpcompression/response_count': 2, 'log_count/DEBUG': 5, 'log_count/INFO': 10, 'memusage/max': 63225856, 'memusage/startup': 63225856, 'response_received_count': 2, 'robotstxt/request_count': 1, 'robotstxt/response_count': 1, 'robotstxt/response_status_count/404': 1, 'планировщик/удален из очереди': 1, 'планировщик/удален из очереди/память': 1, 'планировщик/в очереди': 1, 'планировщик/в очереди/память': 1, 'start_time': datetime.datetime(2024, 1, 5, 4, 20, 17, 461071, tzinfo=datetime.timezone.utc)} 2024-01-04 20:20:18 [scrapy.core.engine] ИНФОРМАЦИЯ: Паук закрыт (закончено)
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Python»