点击事件在触发时不执行任何操作

时间:2019-04-29 21:05:08

标签: node.js web-scraping puppeteer

当我在操纵up的非无头模式中触发.click()事件时,什么也没有发生,甚至没有错误。.“非无头模式,因此我可以直观地监视所单击的内容”

const scraper = {
test: async () => {
        let browser, page;
        try {
            browser = await puppeteer.launch({
                headless: false,
                args: ["--no-sandbox", "--disable-setuid-sandbox"]
            });
            page = await browser.newPage();
        } catch (err) {
            console.log(err);
        }
        try {
            await page.goto("https://www.betking.com/sports/s/eventOdds/1-840-841-0-0,1-1107-1108-0-0,1-835-3775-0-0,", {
                waitUntil: "domcontentloaded"
            });
            console.log("scraping, wait...");
        } catch (err) {
            console.log(err);
        }
        console.log("waiting....");
        try {
            await page.waitFor('.eventsWrapper');
        } catch (err) {
            console.log(err, err.response);
        }

        try {
            let oddsListData = await page.evaluate(async () => {
                let regionAreaContainer = document.querySelectorAll('.areaContainer.region .regionGroup > .regionAreas > div:first-child > .area:nth-child(5)');
                regionAreaContainer = Array.prototype.slice.call(regionAreaContainer);
                let t = []; //Used to monitor the element being clicked
                regionAreaContainer.forEach(async (region) => {
                    let dat = await region.querySelector('div');
                    dat.innerHTML === "GG/NG" ? t.push(dat.innerHTML) : false; //Used to confirm that the right element is being clicked
                    dat.innerHTML === "GG/NG" ? dat.click() : false;
                })
                return t;
            })
            console.log(oddsListData);
        } catch (err) {
            console.log(err);
        }
    }
}

我希望它单击指定的按钮并在页面上加载一些动态数据。

在Chrome的控制台中,出现错误

Transition Rejection($id: 1 type: 2, message: The transition has been superseded by a different transition, detail: Transition#3( 'sportsMultipleEvents'{"eventMarketIds":"1-840-841-0-0,1-1107-1108-0-0,1-835-3775-0-0,"} -> 'sportsMultipleEvents'{"eventMarketIds":"1-840-841-0-0,1-1107-1108-0-0,1-835-3775-535-14,"} ))

2 个答案:

答案 0 :(得分:1)

在这里单击它们可能是一种不太混乱的方法:

for(var div of document.querySelectorAll('div')){
  if(div.innerHTML === 'GG/NG') div.click()
}

答案 1 :(得分:1)

问题

通过执行类似element.click()(在页面上下文内)或element.value = '..'(有关类似问题的信息,请参见this answer)之类的代码,以非人类的方式出现对Angular应用来说是个问题。您想通过使用伪造者函数(例如page.click())来尝试表现出更多的类人行为,因为它们模拟了“真实”的鼠标单击,而不仅仅是触发了元素的click事件。

此外,每当单击其中一项时,页面似乎都会重建页面的某些部分。因此,您需要在每次单击后再次执行选择器。

代码示例

要表现得更像人类,并在每次单击后重新查询元素,可以将代码的后半部分更改为以下形式:

let list = await page.$x("//div[div/text() = 'GG/NG']");
for (let i = 0; i < list.length; i++) {
    await list[i].click();

    // give the page some time and then query the selectors again
    await page.waitFor(500);
    list = await page.$x("//div[div/text() = 'GG/NG']");
}

此代码使用XPath表达式查询包含其他div元素和给定文本的div元素。之后,对元素进行模拟单击,然后再次查询页面内容以尊重DOM元素的更改。