我在csv文件中有一个URL列表,我想抓取每个网站的位置。我真是个新手,所以我不知道哪种工具或语言更好。有一些方法可以做到吗?任何帮助将不胜感激。
答案 0 :(得分:3)
网络抓取可以通过多种方式完成。在线有很多工具,它还取决于您选择的适合您的语言。我曾在Python
工作过,建议您尝试Beautiful Soup
,Requests
和其他API's
。您还需要了解要抓取的DOM
的{{1}}结构。
您可能希望查看webpage
:https://www.crummy.com/software/BeautifulSoup/bs4/doc/
请注意,在网页中,您需要了解DOM结构以搜索其位置并相应地提取位置数据。