如何在Nightmare.js中处理JSON响应

时间:2017-03-10 00:15:20

标签: javascript json nightmare

有兴趣知道是否有更好的或其他方式来处理仅包含使用Nightmare.js 的JSON数据的网址,而不是使用.evaluate中的document.querySelector('*').textContent

这是一个例子;此处的外部URL包含以下内容,即链接的选择字段

的内容
{
  "baseDeliveryModelId":1,
  "county": [
     {"id": "1000706000", "label": "Çukurova", "value": "Çukurova"},
     {"id": "1000707000", "label": "Sarıçam", "value": "Sarıçam" },
     {"id": "1000922000", "label": "Seyhan", "value": "Seyhan"}, 
     {"id": "1000921000", "label": "Yüreğir","value": "Yüreğir"}
  ], 
  "listType":"DISTRICT_LIST"
}

一个sample.js代码,用于从URL 中检索县数据(工作正常)

const Nightmare = require('nightmare'),
    vo = require('vo'),
    nightmare = Nightmare({show: true});


function counties(city) {
    let countyUrl = `https://www.sanalmarket.com.tr/kweb/getCityDeliveryLocation.do?shopId=1&locationId=${city}&locationType=city&deliveryTypeId=0`;
    return nightmare
        .goto(countyUrl)
        .evaluate(function() {
            return (JSON.parse(document.querySelector('*').textContent)).county;
        })
        .catch(function (err) {
            console.log('Error: ', err);
        });
}


vo(function* () {    
    return yield counties('01');    
})((err, result) => {    
    if (err) return console.log(err);
    console.log(result);    
});

注意:问题是关于使用 Nightmare.js ,或者使用node.js中的其他库和Nightmare.js 来处理JSON响应,我完全清楚了能够自己使用axios.js等其他库来解决上述问题。

2 个答案:

答案 0 :(得分:2)

你不需要梦魇。 如果您可以使用自动解析json响应的库,例如request-promise

const rp = require('request-promise');

rp({
url: 'https://www.sanalmarket.com.tr/kweb/getCityDeliveryLocation.do?shopId=1&locationId=${city}&locationType=city&deliveryTypeId=0',
json: true
}).then(function (data) {
    console.log(data.country);
})
.catch(function (err) {
    // Crawling failed...
});

答案 1 :(得分:2)

这就是我这样做的,实现起来更快,更容易记住。我们可以像这样使用它,直到有人创建 .text() .json()等函数。

// Initiate nightmare instance
var nightmare = Nightmare({
                show: true,
                alwaysOnTop: false
            })
            // go to a page with json response
            .goto('https://api.ipify.org/?format=json')
            .evaluate(() => {
                // since all of the text is just json, get the text and parse as json, return it.
                return JSON.parse(document.body.innerText)
            })
            .then((data) => {
             // then use it however we want
                console.log(data)
            });