Как пройти проверку человеком при парсинге веб-страниц?Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Как пройти проверку человеком при парсинге веб-страниц?

Сообщение Anonymous »

Я пытаюсь написать код парсинга веб-страниц на Python, но после входа на веб-сайт доступ к нему всегда запрещен из-за проверки человеком.
Я использовал этот код ниже, а на веб-сайте написано следующее:

«Доступ к этой странице запрещен, поскольку мы считаем, что вы используете инструменты автоматизации для просмотра веб-сайта. Это может произойти по следующим причинам:
Javascript отключен или заблокирован расширением (например, блокировщиками рекламы)
Ваш браузер не поддерживает файлы cookie
Убедитесь, что в вашем браузере включены Javascript и файлы cookie, и что вы не блокируя их загрузку."

from selenium import webdriver
from selenium.webdriver.common.by import By
import time

def login(login_page, my_username, my_password):
user_agent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/128.0.0.0 Safari/537.36"

options = webdriver.EdgeOptions()
options.add_argument(f"user-agent={user_agent}")
options.add_argument("--enable-javascript")

driver = webdriver.Edge(options=options)
driver.set_window_size(1080, 800)
driver.get(login_page)

driver.find_element(By.ID, "username").send_keys(my_username)
driver.find_element(By.ID, 'loginbutton').click()

time.sleep(1)

driver.find_element(By.ID, "password").send_keys(my_password)
driver.find_element(By.ID, 'loginbutton').click()

return(driver)


Подробнее здесь: https://stackoverflow.com/questions/790 ... b-scraping
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение
  • Как пройти проверку человеком при парсинге веб-страниц?
    Anonymous » » в форуме Python
    0 Ответы
    14 Просмотры
    Последнее сообщение Anonymous
  • AttributeError при парсинге веб-страниц
    Anonymous » » в форуме Python
    0 Ответы
    17 Просмотры
    Последнее сообщение Anonymous
  • Недостающая информация при парсинге веб-страниц
    Anonymous » » в форуме C#
    0 Ответы
    14 Просмотры
    Последнее сообщение Anonymous
  • Недостающая информация при парсинге веб-страниц
    Anonymous » » в форуме C#
    0 Ответы
    19 Просмотры
    Последнее сообщение Anonymous
  • Что делает функция синтаксического анализа при парсинге веб-страниц?
    Anonymous » » в форуме Python
    0 Ответы
    17 Просмотры
    Последнее сообщение Anonymous

Вернуться в «Python»