Проблемы с очисткой codeur.com-JavaScript или анти-ботские меры блокируют мой сценарий? [закрыто] ⇐ Javascript

[Anonymous]

Я пытался соскрести списки проектов с codeur.com, используя Python, но я попадаю в стену - я просто не могу извлечь ссылки на проекты или названия. Но ничего, что я пытаюсь, кажется, не сработает. < /P>
Так что происходит? (Безголовный браузер, без движения мыши и т. Д.). Scraped Codeur.com раньше? Имейте какие-либо советы, или даже просто хотите быстро попробовать соскрести страницу и посмотреть, что вы получаете, я бы очень признателен. Я получаю 200 ОК, и HTML, кажется, загружается нормально. Но когда я пытаюсь выбрать ссылки:

soup.select('ainhing HTML, который я вижу в ответе. Текст даже включает в себя структуру, которую я хочу ... она просто не извлечена через BeautifulSoup. Тот же результат: страница загружается, но ссылки, которые мне нужно, просто не находятся в DOM, когда я осматриваю ее с помощью селена. Полезно.

Подробнее здесь: https://stackoverflow.com/questions/796 ... king-my-sc