将多个网址中的图片抓取到单独的文件夹中

时间:2019-02-27 22:07:08

标签: web-scraping

我正在尝试从c.1000个URL列表中抓取分辨率大于500 x 500的所有图像。尽管可以使用Outwit Hub等工具执行此操作,但我还没有弄清楚如何自动将这些图像存储在每个URL的单独文件夹目标中。任何建议将是最有帮助的!举一个我想要达到的目标的例子:

    从www.sample.com/page1刮取的
  • 图像将进入名为“ page1”的文件夹
  • 从www.sample.com/page2刮取的
  • 图像将进入名为“ page2”的文件夹

我通常使用Outwit Hub来满足我的抓取需求,尽管我对几乎所有解决方案都感到满意-鉴于我在该领域的经验不足,所以理想情况是基于非命令行的解决方案。

0 个答案:

没有答案