如何抓取网站中URL格式不一致的所有网页?

时间:2019-06-23 23:49:58

标签: web-scraping

https://fmdataba.com/19/p/1165/lionel-messi/

这是来自网站的网页,其中包含名为“足球经理”的游戏中足球运动员的比赛数据。我正在尝试解析显示在该表中的功能(运球,修整等),用于该网站上所有现有的网页。

但是,URL格式不一致。每个玩家都有自己的唯一ID(在此示例中为1165),后跟名称。我不知道哪个页面存在,哪个不存在。我想解析该网站包含的所有网页。

会有一种有效的方法吗?

0 个答案:

没有答案