我正在练习用python解析网页。所以我要做的是
ans = requests.get(link)
然后我使用re从html中提取一些信息,这些信息存储在
中ans.content
我面对的是,有些站点使用脚本,这些脚本在浏览器中自动执行,但是当我尝试使用请求下载页面时却没有。例如,除了获得信息页面之外,我得到类似
的信息scripts_to_get_info.run()
使用html代码
浏览器已安装在我的计算机上,因此,作为我编写的程序,这意味着,从理论上讲,我应该有一种方法可以运行此脚本并在运行python代码进行解析时获取信息。 可能吗?有什么建议吗?
(这是可行的想法,来自以下事实:当我尝试检查google中的页面时,我看到了没有任何垃圾脚本的真实html文件)