Веб -сайт недвижимости Scrape со ссылкой на PythonPython

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Веб -сайт недвижимости Scrape со ссылкой на Python

Сообщение Anonymous »

Я попытался использовать Python и Beautifulsoup, чтобы вырвать веб -сайт коммерческой недвижимости с соответствующим HREF, также показанным в последнем списке CSV. Но столбец ссылки всегда показан пустым. Как я мог извлечь HREF и запланировать эту задачу, выполняющую весь веб -сайт еженедельно? Спасибо заранее! < /P>

Код: Выделить всё

from bs4 import BeautifulSoup
import requests
from csv import writer
import re

url = "https://objektvision.se/lediga_lokaler/stockholm/city"
page = requests.get(url)

soup = BeautifulSoup(page.content, 'html.parser')
lists = soup.find_all('a', class_ ="ov--list-item d-flex")

with open('lokal_stockholm_city_v11.csv', 'w', encoding='utf8', newline='') as f:
thewriter = writer(f)
header = ['title', 'location', 'area','link']
thewriter.writerow(header)

for list in lists:
title = list.find('div', class_="font-weight-bold text-ov street-address").text.replace('\r\n','')
location = list.find('div', class_="text-ov-dark-grey area-address").text.replace('\r\n','')
area = list.find('div', class_="font-weight-bold size").text.replace('\r\n','')
link =list.find('a', attrs_={'href': re.compile("^https://objektvision.se/Beskriv/")})

info = [title,location, area,link]
thewriter.writerow(info)
Окончательный CSV выглядит так

Подробнее здесь: https://stackoverflow.com/questions/714 ... ing-python
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение
  • Scrape( n ′ gcontent-serverapp ′ , ′ Как очистить HTML-элементы с определенным атрибутом с помощью Python ′ )
    Гость » » в форуме Python
    0 Ответы
    18 Просмотры
    Последнее сообщение Гость
  • Scrape Walmart результаты поиска Python
    Anonymous » » в форуме Python
    0 Ответы
    6 Просмотры
    Последнее сообщение Anonymous
  • Xdomain ajax html Scrape загружает изображения при упаковке ответа данных в jquery
    Anonymous » » в форуме Jquery
    0 Ответы
    25 Просмотры
    Последнее сообщение Anonymous
  • PHP Scrape – создание многомерных массивов из результатов – текущий код возвращает только один результат
    Anonymous » » в форуме Php
    0 Ответы
    17 Просмотры
    Последнее сообщение Anonymous
  • Импорт URL-адресов для JSOUP в Scrape через электронную таблицу
    Anonymous » » в форуме JAVA
    0 Ответы
    18 Просмотры
    Последнее сообщение Anonymous

Вернуться в «Python»