Перехват запросы XHR после нажатия кнопки «Нагрузка» больше с кукловодом ⇐ Javascript

[Anonymous]

Первоначально два файла JSON прибывают на сайте - остальные поступают после нажатия кнопки «Загрузите больше». Я пытаюсь перехватить все запросы. В примере показано, как я жду появления кнопки, и нажимайте ее соответственно. Но до сих пор я получаю только два запроса - хотя должно быть три, потому что я уже нажал кнопку один раз.

Код: Выделить всё

const grab = async(url) => {
const browser = await puppeteer.launch({ headless: false});
const page = await browser.newPage();

await page.setRequestInterception(true);
page.on("request", async (request) => {
const current = await request.url();
if (current.includes('betty-variants')) {
console.log(request.url())
}
//This clicking not working here, the page does not see this selector
// await page.waitForSelector('.well-sm.well p.text-primary.pull-left span', { timeout: 5000})
// await page.click('.well-sm.well p.text-primary.pull-left span')

// Allow the request to be sent
await request.continue();
});

await page.goto(url, { waitUntil: 'networkidle2' });

await page.waitForSelector('.well-sm.well p.text-primary.pull-left span');
await page.click('.well-sm.well p.text-primary.pull-left span')

await browser.close();
};

Я попытался получить данные после нажатия кнопки, но я получаю только стандартные два ответа JSON с сайта.

Подробнее здесь: https://stackoverflow.com/questions/795 ... -puppeteer