我第一次尝试使用phantomJS并且我已成功从站点中提取som数据,但是当我尝试将某些内容写入文件时,我收到错误:ReferenceError:找不到变量:fs
这是我的剧本
var page = require('webpage').create();
var fs = require('fs');
page.onConsoleMessage = function(msg) {
console.log(msg);
};
page.open("http://www.pinterest.com/search/pins/?q=motorbike", function(status) {
if (status === "success") {
page.includeJs("http://code.jquery.com/jquery-latest.js", function() {
page.evaluate(function() {
var imgs = {
title: [],
href: [],
ext: [],
src: [],
alt: []
};
$('a.pinImageWrapper').each(function() {
imgs.title.push($(this).attr('title'));
imgs.href.push($(this).attr('href'));
var ext = $(this).children('.pinDomain').html();
imgs.ext.push(ext);
var img = $(this).children('.fadeContainer').children('img.pinImg');
imgs.src.push(img.attr('src'));
imgs.alt.push(img.attr('alt'));
});
if (imgs.title.length >= 1) {
for (var i = 0; i < imgs.title.length; i++) {
console.log(imgs.title[i]);
console.log(imgs.href[i]);
console.log(imgs.ext[i]);
console.log(imgs.src[i]);
console.log(imgs.alt[i]);
}
} else {
console.log('No pins found');
}
fs.write('foo.txt', 'bar');
});
phantom.exit();
});
}
});
我错过了什么?
编辑:在这个问题的回复中,我了解了为什么我无法访问评估中的数据,以及我如何访问它。
var page = require('webpage').create();
var fs = require('fs');
page.onConsoleMessage = function(msg) {
console.log(msg);
};
openPinPage('motorbike');
function openPinPage(keyword) {
page.open("http://www.pinterest.com/search/pins/?q=" + keyword, function(status) {
if (status === "success") {
page.includeJs("http://code.jquery.com/jquery-latest.js", function() {
getImgsData();
});
}
});
}
function getImgsData() {
var data = page.evaluate(function() {
var imgs = {
title: [],
href: [],
ext: [],
src: [],
alt: []
};
$('a.pinImageWrapper').each(function() {
imgs.title.push($(this).attr('title'));
imgs.href.push($(this).attr('href'));
var ext = $(this).children('.pinDomain').html();
imgs.ext.push(ext);
var img = $(this).children('.fadeContainer').children('img.pinImg');
imgs.src.push(img.attr('src'));
imgs.alt.push(img.attr('alt'));
});
return imgs;
});
for (var i = 0; i < data.title.length; i++) {
console.log(data.title[i]);
};
phantom.exit();
}
答案 0 :(得分:8)
phantomjs
您无法拥有page.evaluate
个对象,因为这是一个网页。我将举一个简单的例子,说明你如何实现自己的目标。
如果您想在文件中写一些webpage
的内容,则必须从page.evaluate
返回这些内容。你将在page.open
中获得这些值。在这里您可以访问fs
,因此您可以编写这些内容。
我用一个简单的例子展示了如何为文件写一些webpage
标题。
page.open("http://www.pinterest.com/search/pins/?q=motorbike", function(status) {
if (status === "success") {
page.includeJs("http://code.jquery.com/jquery-latest.js", function() {
var title = page.evaluate(function() {
return document.title; // here I don't have access to fs I'll return title of document from here.
});
console.log(title) //I got the title now I can write here.
fs.write('foo.txt', title);
phantom.exit();
});
}
});
答案 1 :(得分:3)
答案 2 :(得分:2)
扩展Tomalak的回答:
您的evaluate()
ed函数不是在Phantoms脚本的上下文中运行,而是在页面中运行,因此无法看到fs
。
在这种情况下,您希望您的函数以其他方式读取脚本的结果。