如何从网站列表中抓取位置

时间:2017-11-11 22:58:59

标签: web-scraping

我在csv文件中有一个URL列表,我想抓取每个网站的位置。我真是个新手,所以我不知道哪种工具或语言更好。有一些方法可以做到吗?任何帮助将不胜感激。

1 个答案:

答案 0 :(得分:3)

网络抓取可以通过多种方式完成。在线有很多工具,它还取决于您选择的适合您的语言。我曾在Python工作过,建议您尝试Beautiful SoupRequests和其他API's。您还需要了解要抓取的DOM的{​​{1}}结构。 您可能希望查看webpagehttps://www.crummy.com/software/BeautifulSoup/bs4/doc/

的文档

请注意,在网页中,您需要了解DOM结构以搜索其位置并相应地提取位置数据。