使用Python进行Web爬网:ConnectionError:HTTPSConnectionPool(主机='towardsdatascience.com',端口= 443):url

时间:2020-04-23 15:26:36

标签: python web-scraping

我正在尝试使用Request库进行Web抓取。但是我收到gaierror和ConnectionError。我不是直接连接到Internet,而是通过我公司的VPN。我用下面的代码:

import requests
get_url = requests.get ('my_webpage.com')

经过研究,我知道我需要使用以下代码提供身份验证:

from requests_ntlm2 import HttpNtlmAuth    
url = "my_webpage.com"
session = requests.Session()
session.auth = HttpNtlmAuth('domain\\username','password')
page = session.get(url)

但是我仍然遇到相同的错误。这可能是由于公司自己的VPN而发生的。但是我无法获得确切的解决方案。请帮我解决这个问题。

0 个答案:

没有答案