有兴趣知道是否有更好的或其他方式来处理仅包含使用Nightmare.js 的JSON数据的网址,而不是使用.evaluate中的document.querySelector('*').textContent
?
这是一个例子;此处的外部URL包含以下内容,即链接的选择字段
的内容{
"baseDeliveryModelId":1,
"county": [
{"id": "1000706000", "label": "Çukurova", "value": "Çukurova"},
{"id": "1000707000", "label": "Sarıçam", "value": "Sarıçam" },
{"id": "1000922000", "label": "Seyhan", "value": "Seyhan"},
{"id": "1000921000", "label": "Yüreğir","value": "Yüreğir"}
],
"listType":"DISTRICT_LIST"
}
一个sample.js代码,用于从URL 中检索县数据(工作正常)
const Nightmare = require('nightmare'),
vo = require('vo'),
nightmare = Nightmare({show: true});
function counties(city) {
let countyUrl = `https://www.sanalmarket.com.tr/kweb/getCityDeliveryLocation.do?shopId=1&locationId=${city}&locationType=city&deliveryTypeId=0`;
return nightmare
.goto(countyUrl)
.evaluate(function() {
return (JSON.parse(document.querySelector('*').textContent)).county;
})
.catch(function (err) {
console.log('Error: ', err);
});
}
vo(function* () {
return yield counties('01');
})((err, result) => {
if (err) return console.log(err);
console.log(result);
});
注意:问题是关于使用 Nightmare.js ,或者使用node.js中的其他库和Nightmare.js 来处理JSON响应,我完全清楚了能够自己使用axios.js等其他库来解决上述问题。
答案 0 :(得分:2)
你不需要梦魇。 如果您可以使用自动解析json响应的库,例如request-promise
const rp = require('request-promise');
rp({
url: 'https://www.sanalmarket.com.tr/kweb/getCityDeliveryLocation.do?shopId=1&locationId=${city}&locationType=city&deliveryTypeId=0',
json: true
}).then(function (data) {
console.log(data.country);
})
.catch(function (err) {
// Crawling failed...
});
答案 1 :(得分:2)
这就是我这样做的,实现起来更快,更容易记住。我们可以像这样使用它,直到有人创建 .text()和 .json()等函数。
// Initiate nightmare instance
var nightmare = Nightmare({
show: true,
alwaysOnTop: false
})
// go to a page with json response
.goto('https://api.ipify.org/?format=json')
.evaluate(() => {
// since all of the text is just json, get the text and parse as json, return it.
return JSON.parse(document.body.innerText)
})
.then((data) => {
// then use it however we want
console.log(data)
});