Casper JS Ajax请求未返回任何响应

时间:2018-04-03 13:15:17

标签: web-scraping phantomjs casperjs

我正在使用casper JS来废弃网站上的数据。现在我只是获得一个网站的标题。当我废弃该页面的标题时,我想通过Casper JS ajax方法将该标题发送到我的php脚本,但由于某些原因它不适用于我:

以下是Casper JS代码:

var casper = require('casper').create();

casper.start("https://www.google.com/", function() {});

casper.then(function() {
  var d = this.evaluate(function() {
    var links = document.getElementsByTagName('title')[0].textContent;
    return links;
  })
  console.log(d);
  casper.thenOpen("modal_scripts.php?scraped=true", {
      method: "post",
      data: {
        data: d
      }
    },
    function(response) {
      console.log(response.data);
    });
})


casper.run();

这是php脚本,我想收集casper POST方法发送的数据。

if (isset($_POST["scraped"])) {

  $d = $_POST["data"];

  echo "Response : "." ".$d;

}

  

我只想将报废的数据发送到我的php脚本,我可以将其保存在数据库中。

1 个答案:

答案 0 :(得分:0)

更简单的解决方案:

var casper = require('casper').create();

casper.start("https://www.google.com/");
casper.then(function() {
  var data = this.evaluate(function() {
    var title = document.getElementsByTagName('title')[0].textContent;
    return title;
  })
  console.log(data);
  casper.thenOpen("http://localhost/fiverr/Crawl%20The%20Jobs/modal_scripts.php", {
    method: "POST",
    data: data + "&crawled_jobs=true"
  }).then(function(res) {
    console.log(res.status);
  })
})

casper.run();