scrapy HtmlResponse和Response的不同hxs元素

时间:2012-11-07 14:31:17

标签: selector response scrapy

我想从数据库加载url-adresses并抓取每个页面。因此我试图手动启动一个解析函数 我的问题是,即使解析函数的响应属性与HtmlResponse调用的响应属性完全相同(两者:< 200 url>),也会生成不同的hx: response-attribute的一个是:

    <HtmlXPathSelector xpath="None data=u'<html lang="de" dir="ltr" class="client-'>

HtmlResponse-Attribute的那个只是:

    <HtmlXPathSelector xpath="None data=u'<html>

为什么会这样?

如果我尝试获取Response(url),我只会得到一个名为的AttributeError:'Response'对象没有属性'body_as_unicode'

感谢您的帮助

0 个答案:

没有答案