使用Google自定义搜索作为图像抓取工具?

时间:2015-08-23 21:14:57

标签: filter web-scraping image-uploading google-custom-search

我想抓取与特定文字重合的图像。我希望它过滤这些,定期检查新图像,并将结果上传到程序。

我是否必须设置网站才能执行此操作?有更好的工具吗?哪种方法最简单?我对文档感到有些不知所措。

1 个答案:

答案 0 :(得分:0)

我建议您使用谷歌搜索刮取与特定文本重合的图像。 请记住,Google对网页抓取非常敏感,特别是频繁请求其服务器搜索网页。阅读this post进入它(搜索结果页面与查询business directories有点类似)。

  

我是否必须设置网站才能执行此操作?

绝对不是(谷歌常规搜索)。如果您想使用Google自定义搜索,则需要设置网站。

  

有更好的工具吗?

我认为最好的方法是自定义刮刀(python,php)。但是,再一次,以速度缓和,以免谷歌禁止你或推出CAPTCHA

  

哪种方法最简单?

如果您缺乏编程技巧,请转到the web scraping software