Question

在节点4.2.0中调用以下代码，它在节点cron作业中执行，而不是通过终端执行。我要求的网站＆＃39;是http://www.milb.com/index.jsp?sid=t402。

module.exports.dynamicRequest = function(url, callback) {
  var makeDynamicRequest = function(attempt) {
    if (attempt === 4) {
      svghost.delPhantom();
      return callback(new Error('Phantom had 3 failures'));
    }
    svghost.getPhantom(function(err, ph) {
      if (err) {
        console.log(err.stack);
        setTimeout(function() {
          ph.exit();
          svghost.delPhantom();
          attempt++;
          makeDynamicRequest(attempt);
        }, Math.pow(2, attempt) * 300);
      } else {
        ph.createPage(function(page) {
          page.open(url, function(status) {
            if (status === 'success') {
              page.get('content', function(content) {
                ph.exit();
                svghost.delPhantom();
                callback(null, content);
              });
            } else {
              ph.exit();
              svghost.delPhantom();
              setTimeout(function() {
                attempt++;
                makeDynamicRequest(attempt);
              }, Math.pow(2, attempt) * 300);
            }
          });
        });
      }
    });
  };
  makeDynamicRequest(1);
};

svghost只是一个简单的幻像包装器，它递归地尝试创建一个幻像对象，直到成功为止。我有信心svghost不是问题。这在100％的时间本地工作，但是当cron作业在我们的服务器上运行时，我发现了这个错误：phantom stdout: NETWORK_ERR: XMLHttpRequest Exception 101: A network error occurred in synchronous requests.

这是堆栈跟踪：

phantom stdout: /srv/apps/scraper/node_modules/spoton/node_modules/phantom/shim.js:7608 in send
/srv/apps/scraper/node_modules/spoton/node_modules/phantom/shim.js:7608 in _start
/srv/apps/scraper/node_modules/spoton/node_modules/phantom/shim.js:7635

Answer 1

使用phantom.create创建幻像实例时，您应添加--web-security=no参数或使用options对象添加'web-security':'no'。

这会导致类似这样的事情：

phantom.create({'web-security':'no'}, callback...)

并且您的NETWORK_ERROR不会消失

有关更多信息，请参阅此stack或tihs github issue。

节点4.2.0幻像标准输出：NETWORK_ERR：XMLHttpRequest异常101：同步请求中发生网络错误

1 个答案: