Запрос DB Web Scraper Python Mongo не работаетPython

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Запрос DB Web Scraper Python Mongo не работает

Сообщение Anonymous »

Я довольно новичок в программировании, и в настоящее время я изучаю Python. У меня есть проект веб -скребков, использующий Python и Beautiful Soup Library ниже, где я соскребую целую статью с веб -страницы новостей. Мне удастся соскрести статью, но я хочу запросить всю статью для конкретных слов и когда я пробую монгодб, я не могу искать слова.import pymongo
import requests
url ="https://www.bbc.com/news/articles/cy081nqx2zjo"
response = requests.get(url)

from bs4 import BeautifulSoup
soup =BeautifulSoup(response.text,'html.parser')

paragraphs = soup.find_all("p")

for paragraph in paragraphs:
print(paragraph.text)

def check(paragraphs):
if len(paragraphs) > 100:
return "extracted fine"
else:
return "An exception occurred"
print(check(paragraphs))

mydict={}
doc = {"paragraphs":mydict}
from pymongo import MongoClient
client= pymongo.MongoClient("mongodb://localhost:27017")
db =client["mydb"]
collection=db["summarizer"]
collection.insert_one(doc)


Подробнее здесь: https://stackoverflow.com/questions/794 ... ot-working
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение
  • Скорость записи Mongo DB очень низкая в среде Mongo Cluster Multinode.
    Гость » » в форуме JAVA
    0 Ответы
    54 Просмотры
    Последнее сообщение Гость
  • Драйвер Java mongo – как сохранить объект в mongo, который не сериализуется с помощью геттеров
    Anonymous » » в форуме JAVA
    0 Ответы
    28 Просмотры
    Последнее сообщение Anonymous
  • Не могу запустить Selenium Web Scraper на виртуальной машине Ubuntu
    Anonymous » » в форуме C#
    0 Ответы
    17 Просмотры
    Последнее сообщение Anonymous
  • Python Scraper Невозможно очистить img src
    Anonymous » » в форуме Python
    0 Ответы
    17 Просмотры
    Последнее сообщение Anonymous
  • Python-Scraper с BS4 и Selenium: проблемы сеанса с Chrome
    Anonymous » » в форуме Python
    0 Ответы
    13 Просмотры
    Последнее сообщение Anonymous

Вернуться в «Python»