我尝试使用puppeteer抓取html。但是它失败了,因为URL是固定为js呈现的。
我检查了网络中是否有api文件-chrome开发人员模式下的xhr,但没有。
最后,在占位符中输入文本之后,我们尝试对检索到的信息进行爬网。
const browser = await puppeteer.launch(options);
const page = await browser.newPage();
await page.goto('https://m.bobaedream.co.kr/search#');
我可以通过直接输入url来访问页面,但是使用puppeteer加载它会继续使用about:blank加载它。
如果您能指出发生这种情况的原因以及解决方法,我将不胜感激。