我正在尝试使用import.io抓取电子商务网站并收集各种定价信息。但是,每种产品的价格取决于用户设置的众多下降量。
链接到网站:http://www.saxoprint.co.uk/shop/brochures
我需要抓取工具浏览所有不同的选项,并收集与此产品相关的所有可能的定价组合。我最初尝试使用Chrome的网络抓取器添加,但发现此扩展程序不支持一页内的多次点击操作。
我认为这可以通过import.io实现,但我可能错了。有没有人知道如何收集这些数据,即使它是替代import.io?
...谢谢
答案 0 :(得分:1)
不幸的是,使用import.io工具无法遍历所有不同的选项。使用导入,您需要手动将所有这些不同的选项关联为输入。我通过编写一个python脚本在类似的电子商务网站上取得了成功,该脚本可以遍历所有可能的选项并写出该数据。
谢谢,
梅格