使用Scrapy从HTML中取出多少是否重要？

Question

我正在构建一个需要抓取整个HTML文件的抓取工具，我想知道请求this['displayStops']() // The same as calling this.displayStops() 或response.body是否会使用比服务器更多的服务器，只是请求response.body_as_unicode()获取HTML的更具体部分。

我的直觉是它不应该有任何区别，因为无论你提取哪个部分都必须要求整个HTML页面，但我只是想确保对response.xpath()如何更有经验的用户作品。

Answer 1

  

我的直觉是它不应该有任何区别，因为无论你提取哪个部分都必须要求整个HTML页面

当然，目前您可以访问response对象，该请求已经处理完毕，并且已经下载了响应。