是否可以从该网站的地图上剪贴数据?

时间:2019-06-13 14:20:33

标签: python maps screen-scraping

是否可以使用python从此地图中提取数据 https://www.kiabi.com/magasins.html 我需要从每个蓝色项目符号中删除信息。

谢谢。

我试图查看源代码并找到状态为“隐藏”的东西。

1 个答案:

答案 0 :(得分:0)

在对stackoverflow提出问题时,您应该花些时间解释您已经尝试过的内容,并向我们展示您产生的代码。

花时间阅读https://stackoverflow.com/help/how-to-ask

关于您的抓取问题,您可以使用以下cURL命令获取有关所有商店的信息。 不要删除Referer标头,因为服务器正在使用它进行验证。

> curl 'https://api.woosmap.com/stores?key=woos-3246a080-0b90-39a2-a673-5ae6b9acb1d9' -H 'Referer: https://www.kiabi.com/magasins.html'

一段时间后,您可能需要刷新关键参数。 您可以在提供的网址的HTML中对其进行硬编码。

> curl -s 'https://www.kiabi.com/magasins.html' | grep -oE 'fr:woos-[0-9a-f-]{36}'
fr:woos-3246a080-0b90-39a2-a673-5ae6b9acb1d9