从RSS提要中提取XML元素值

时间:2014-11-21 17:59:21

标签: javascript xml xpath rss casperjs

我有一个RSS提要,我需要从中提取最新的pubDate元素以供我测试。做同样的最好方法是什么?

RSS Feed链接:https://secure.hyper-reach.com/rss/310085

示例XML:

<?xml version="1.0" encoding="ISO-8859-1" ?>
<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom">
    <channel>
        <atom:link href="https://secure.hyper-reach.com/rss/310085" rel="self" type="application/rss+xml" />
        <link>https://secure.hyper-reach.com/rss/310085</link>
        <title>Hyper-Reach Automated Test Account alerts feed "Automated RSS Test"</title>
        <description>Constant feed of alerts from Automated Test Account via hyper-reach.com</description>
        <lastBuildDate>Fri, 21 Nov 2014 00:56:15 -0500</lastBuildDate>
        <language>null</language>
        <ttl>5</ttl>
        <item>
            <title>Alert (2014-11-21)</title>
            <pubDate>Fri, 21 Nov 2014 00:56:15 -0500</pubDate>
            <description>This is a test message.</description>
            <link>https://secure.hyper-reach.com/servlet/getprompt?prompt_id=122967&amp;ver=0&amp;format=34&amp;nologin=1</link>
            <guid isPermaLink="false">https://secure.hyper-reach.com/rss/item/257029</guid>
        </item>
        <item>...</item>
        <item>...</item>
</channel>
</rss>

我在做什么:

checkRSSFeed = function() {
    //first I navigate to a certain page in my website
    var href = '';

    casper.then(function() {
        this.test.assertExists(x('//a[contains(@href, "SUBSTRING OF URL")]'), 'the element exists');
        href = casper.getElementAttribute(x('//a[contains(@href, "SUBSTRING OF URL")]'), 'href');
     }).then(function() {
        this.open(href);
     }).then(function() {
        this.echo(this.getCurrentUrl());

        var pubDate = '';
        this.getPageContent();
        pubDate = this._utils_.getElementByXPath('.//pubDate');
     });
};  

我得到的错误是

  

uncaughtError: TypeError: 'undefined' is not an object (evaluating 'this._utils_.getElementByXPath')

1 个答案:

答案 0 :(得分:2)

要检索pubDate内容,您可以使用casper.fetchText函数,但它有一个缺点,即它将所有文本节点连接成一个字符串:

casper.echo(casper.fetchText("pubDate"));

会打印

  

2014年11月21日星期五00:56:15 -0500Fri,2014年11月21日00:47:34 -0500Fri,2014年11月21日00:45:36 -0500

要实际单独检索文本,您可以使用适用于多个元素的casper.getElementsInfo并提供text属性。之后的简单映射会生成一个可以在之后处理的数组:

var pubDates = casper.getElementsInfo("pubDate").map(function(elementInfo){
    return elementInfo.text; // or even `return new Date(elementInfo.text)`
});

但是,由于您只想要最新的RSS源和最新的RSS源,您可以简单地使用第一个(请注意s中缺少getElementInfo):

var pubDate = casper.getElementInfo("pubDate").text;

如果您在页面上下文中完成此操作,那么您之前的方法会有效。 clientutils模块只能在页面上下文中访问(在casper.evaluate内)。

var pubDate = this.evaluate(function(){
    return __utils__.getElementByXPath('//pubDate').innerText;
});

请注意,__utils__两侧都有两个下划线。此外,您不能将DOM元素从页面上下文传递到casper上下文,但您可以传递字符串和其他基本对象。因此,我返回了DOM元素的innerText属性。 documentation说明了这一点:

  

注意: evaluate函数的参数和返回值必须是一个简单的原始对象。经验法则:如果它可以通过JSON序列化,那就没关系了。