无法将链接从一个功能传递到另一个功能

时间:2018-10-19 19:22:26

标签: javascript node.js web-scraping request cheerio

我在node.js中编写了一个非常小的脚本,使用requestcheerio来解析与titles连接的links,我已经从中删除了它是登录页面。

问题是我找不到如何将链接(从第一个函数填充)传递到第二个函数以从那里获取标题的任何想法。我对node.js很陌生,因此无法弄清楚如何从第一个函数返回结果并将其传递给后一个函数。

我遇到的错误:

for (const link of links) {
                   ^
ReferenceError: links is not defined

这是完整的脚本:

var request = require('request');
var cheerio = require('cheerio');

const url = 'https://news.ycombinator.com';

request(url, function (error, response, html) {
  if (!error && response.statusCode == 200) {
    var $ = cheerio.load(html);
    $('.title .storylink').each(function(){
    var links = $(this).attr("href");
    });
  }
});

for (const link of links) {
  (function(url) {
    request(url, function (error, response, html) {
      if (!error && response.statusCode == 200) {
        var $ = cheerio.load(html);
        var title = $('title').eq(0).text();
        console.log(title);
      }
    });
})(link);
}

顺便说一句,脚本中使用的选择器是完美无缺的。我需要知道的是将结果从一个函数传递到另一个函数。

2 个答案:

答案 0 :(得分:0)

您的“链接”变量超出范围。它在“请求”中的回调之外。必须将请求变成承诺,使用请求承诺或将for循环移到函数中以将链接保持在作用域内。

https://www.npmjs.com/package/request-promise

https://scotch.io/courses/10-need-to-know-javascript-concepts/callbacks-promises-and-async

答案 1 :(得分:0)

看来我找到了解决方案。它成功了:

var request = require('request');
var cheerio = require('cheerio');

const url = 'https://news.ycombinator.com';

function getItems(callback){
  request(url, function (error, response, html) {
    if (!error && response.statusCode == 200) {
      var $ = cheerio.load(html);
      $('.title .storylink').each(function(){
      var links = $(this).attr("href");
      return callback(links,false);
      });
    }
  });
}
getItems((link)=>{
    request(link, function (error, response, html) {
      if (!error && response.statusCode == 200) {
        var $ = cheerio.load(html);
        var title = $('title').eq(0).text();
        console.log(title);
      }
    });
});