Я довольно новичок в программировании, и в настоящее время я изучаю Python. У меня есть проект веб -скребков, использующий Python и Beautiful Soup Library ниже, где я соскребую целую статью с веб -страницы новостей. Мне удастся соскрести статью, но я хочу запросить всю статью для конкретных слов и когда я пробую монгодб, я не могу искать слова.import pymongo
import requests
url ="https://www.bbc.com/news/articles/cy081nqx2zjo"
response = requests.get(url)
from bs4 import BeautifulSoup
soup =BeautifulSoup(response.text,'html.parser')
paragraphs = soup.find_all("p")
for paragraph in paragraphs:
print(paragraph.text)
def check(paragraphs):
if len(paragraphs) > 100:
return "extracted fine"
else:
return "An exception occurred"
print(check(paragraphs))
mydict={}
doc = {"paragraphs":mydict}
from pymongo import MongoClient
client= pymongo.MongoClient("mongodb://localhost:27017")
db =client["mydb"]
collection=db["summarizer"]
collection.insert_one(doc)
Подробнее здесь: https://stackoverflow.com/questions/794 ... ot-working
Запрос DB Web Scraper Python Mongo не работает ⇐ Python
-
- Похожие темы
- Ответы
- Просмотры
- Последнее сообщение