使用Scrapy刮取* URL

时间:2017-02-19 02:23:39

标签: python-2.7 xpath scrapy

我是使用Scrapy的新手,我想用它来对http://www.forums.mlb.com/discussions/Major_League_Baseball/ml-mlb?redirCnt=1进行测试。

我想使用以下XPath拉出包含术语“white sox”的属性'href'的所有'a'元素:$ x('// a [contains(@href,“white sox”)]' )来自整个留言板

社区可以协助我在第一个蜘蛛类中的“起始URL”变量中输入什么URL来抓取整个留言板吗?

我是网络抓取新手,请原谅我。

0 个答案:

没有答案