Навигация по сайту с помощью ScrapyPython

Программы на Python
Гость
Навигация по сайту с помощью Scrapy

Сообщение Гость »

Итак, я работаю над личным проектом, в рамках которого изучаю парсинг веб-страниц. Я выбрал этот сайт в качестве своего веб-сайта для парсинга. Я использую Scrapy, так как мне кажется, это хорошая библиотека. Для этого сайта. Мне нужно просмотреть каждую страницу от А до Я, чтобы открыть каждую подссылку и получить заголовок и описание. Я смог сделать часть подссылки. Я не могу перемещаться по буквам от А до Я, так как с таким классом нет кнопки «Далее» или CSS. Это ссылка на https://medlineplus.gov/ency/encyclepedia_A.htm.
Здесь encyclepedia_A.htm будет encyclepedia_B.htm для страницы B. Как мне перемещаться по ним. Или как мне их использовать, если я добавлю их в Start_urls.
Изображение


Подробнее здесь: https://stackoverflow.com/questions/781 ... ing-scrapy

Вернуться в «Python»