使用Scrapy使用网站的搜索功能

时间:2016-08-11 05:07:56

标签: python web-scraping scrapy

我是一个使用Scrapy的新手,刚刚开始使用它。

我发现自己只是发现自己陷入困境,因为我似乎无法在网上找到任何内容,也没有在stackoverflow上发现任何类似问题!

我基本上是从.csv文件中读几行,我想在这个网站上使用搜索功能' http://collectorsfrenzy.com/'

我该如何解决这个问题?

1 个答案:

答案 0 :(得分:0)

首先,尝试识别网站中使用的搜索端点(即此方案中的collectorsfrenzy.com/search?q={query})。一旦你想出来,将你的搜索词追加到那里,并用它作为抓取和抓取结果内容的起点。