PhantomJS问题写入文件fs。无法找到变量:fs

时间:2014-07-21 14:07:52

标签: javascript phantomjs

我第一次尝试使用phantomJS并且我已成功从站点中提取som数据,但是当我尝试将某些内容写入文件时,我收到错误:ReferenceError:找不到变量:fs

这是我的剧本

var page = require('webpage').create();
    var fs = require('fs');

    page.onConsoleMessage = function(msg) {
        console.log(msg);
    };

    page.open("http://www.pinterest.com/search/pins/?q=motorbike", function(status) {
        if (status === "success") {
            page.includeJs("http://code.jquery.com/jquery-latest.js", function() {
                page.evaluate(function() {
                    var imgs = {
                        title: [],
                        href: [],
                        ext: [],
                        src: [],
                        alt: []
                    };
                    $('a.pinImageWrapper').each(function() {
                        imgs.title.push($(this).attr('title'));
                        imgs.href.push($(this).attr('href'));
                        var ext = $(this).children('.pinDomain').html();
                        imgs.ext.push(ext);
                        var img = $(this).children('.fadeContainer').children('img.pinImg');
                        imgs.src.push(img.attr('src'));
                        imgs.alt.push(img.attr('alt'));
                    });
                    if (imgs.title.length >= 1) {
                        for (var i = 0; i < imgs.title.length; i++) {
                            console.log(imgs.title[i]);
                            console.log(imgs.href[i]);
                            console.log(imgs.ext[i]);
                            console.log(imgs.src[i]);
                            console.log(imgs.alt[i]);
                        }
                    } else {
                        console.log('No pins found');
                    }
                    fs.write('foo.txt', 'bar');
                });
                phantom.exit();
            });
        }
    });

我错过了什么?

编辑:在这个问题的回复中,我了解了为什么我无法访问评估中的数据,以及我如何访问它。

            var page = require('webpage').create();
        var fs = require('fs');

        page.onConsoleMessage = function(msg) {
            console.log(msg);
        };

        openPinPage('motorbike');

        function openPinPage(keyword) {
            page.open("http://www.pinterest.com/search/pins/?q=" + keyword, function(status) {
                if (status === "success") {
                    page.includeJs("http://code.jquery.com/jquery-latest.js", function() {
                        getImgsData();
                    });
                }
            });
        }

        function getImgsData() {
            var data = page.evaluate(function() {
                var imgs = {
                    title: [],
                    href: [],
                    ext: [],
                    src: [],
                    alt: []
                };
                $('a.pinImageWrapper').each(function() {
                    imgs.title.push($(this).attr('title'));
                    imgs.href.push($(this).attr('href'));
                    var ext = $(this).children('.pinDomain').html();
                    imgs.ext.push(ext);
                    var img = $(this).children('.fadeContainer').children('img.pinImg');
                    imgs.src.push(img.attr('src'));
                    imgs.alt.push(img.attr('alt'));
                });
                return imgs;
            });
            for (var i = 0; i < data.title.length; i++) {
                console.log(data.title[i]);
            };
            phantom.exit();
        }

3 个答案:

答案 0 :(得分:8)

phantomjs您无法拥有page.evaluate个对象,因为这是一个网页。我将举一个简单的例子,说明你如何实现自己的目标。

如果您想在文件中写一些webpage的内容,则必须从page.evaluate返回这些内容。你将在page.open中获得这些值。在这里您可以访问fs,因此您可以编写这些内容。

我用一个简单的例子展示了如何为文件写一些webpage标题。

page.open("http://www.pinterest.com/search/pins/?q=motorbike", function(status) {
        if (status === "success") {
            page.includeJs("http://code.jquery.com/jquery-latest.js", function() {

                var title = page.evaluate(function() {
                    return document.title;  // here I don't have access to fs I'll return title of document from here.
                });
                console.log(title) //I got the title now I can write here.
                fs.write('foo.txt', title);
                phantom.exit();
            });
        }
    });

答案 1 :(得分:3)

直接来自the docs for page.evaluate()

  

在网页的上下文中评估给定的函数。该   执行是沙盒,网页无法访问幻像   对象,它无法探测自己的设置。

无需进一步说明。

答案 2 :(得分:2)

扩展Tomalak的回答:

您的evaluate() ed函数不是在Phantoms脚本的上下文中运行,而是在页面中运行,因此无法看到fs

在这种情况下,您希望您的函数以其他方式读取脚本的结果。