Я пытаюсь парсить веб-сайт, на котором есть API. Один из API выдает json только в том случае, если мы вошли в систему.
Я залогинился в файлах cookie, а затем отправляю запросы, я успешно отправляю запрос.
Но проблема в том, что , срок действия этих файлов cookie истекает через некоторое время, и мне нужно получить новые файлы cookie для отправки запроса.
Есть ли способ автоматически получать новые файлы cookie перед очисткой веб-сайта?
Примечание: я где-то читал, что мы можем войти в систему вручную, используя селен, и сохранить файлы cookie. Эти файлы cookie затем используются для очистки. Но я не знаю, как получить файлы cookie из селена и использовать их для библиотеки запросов.
Может ли кто-нибудь мне помочь?
Ссылка: https: //www.arbeitsagentur.de/bewerberboerse/
Я использовал библиотеку запросов для входа в систему, но вместо кода ответа 302 она выдала мне либо 200, либо 400.
Затем я попробовал использовать селен, но структура сайта очень сложная. Выполнено слишком много перенаправлений, и элементы не извлекаются успешно.
Подробнее здесь: https://stackoverflow.com/questions/789 ... ed-website
