Как парсить сайт с бесконечной прокруткой? [закрыто] ⇐ Python

[Anonymous]

Я хочу очистить веб-сайт, на котором при прокрутке полосы прокрутки начинают загружаться новые данные. как парсить этот сайт?

Код: Выделить всё

hospitals2 = []

for i in range(1,10):
try:
element = driver.find_element(By.XPATH, paths[i])
hospital_name=element.text
driver.implicitly_wait(5)
driver.execute_script("arguments[0].scrollIntoView();",element)
hospitals2.append(hospital_name)
except AttributeError:
hospitals2.append("hospital name not found")

Я попробовал приведенный выше код, но новые данные не загружаются.