标签: python python-requests
我使用python请求(http://docs.python-requests.org/en/latest/)库来下载和解析特定的网页。只要页面不是动态的,这样就可以正常工作。如果正在考虑的页面使用javascript,情况会有所不同。
特别是,我说的是一个网页,一旦你滚动到页面底部就会自动加载更多内容,这样你就可以继续滚动了。此新内容未包含在页面的源文本中,因此,我无法下载。
我想过在python(selenium)中模拟浏览器 - 这是正确的方法吗?