Question

我一直在尝试使用不同的Python模块，例如pycurl和requests，但仍然无法获得curl -v <URL>的输出，如下所示。

期望的输出（使用Python代码）

C:\>curl -v http://example.com/
*   Trying 93.184.216.34...
* TCP_NODELAY set
* Connected to example.com (93.184.216.34) port 80 (#0)
> GET / HTTP/1.1
> Host: example.com
> User-Agent: curl/7.52.1
> Accept: */*
>
< HTTP/1.1 200 OK
< Cache-Control: max-age=604800
< Content-Type: text/html; charset=UTF-8
< Date: Mon, 21 Jan 2019 00:34:32 GMT
< Etag: "1337+ident"
< Expires: Mon, 28 Jan 2019 00:34:32 GMT
< Last-Modified: Fri, 09 Aug 2013 23:54:35 GMT
< Server: ECS (sjc/4E29)
< Vary: Accept-Encoding
< X-Cache: HIT
< Content-Length: 1270
<
<!doctype html>
<html>
... input truncated ...
</html>
* Curl_http_done: called premature == 0
* Connection #0 to host example.com left intact

C:\>

因为这是Windows中的版本，所以我不想使用os.system和subprocess模块，因为默认情况下curl.exe不存在。

这是我的尝试...但是我仍然没有得到curl -v

产生的类似输出

>>> import requests
>>> requests.get("http://example.com").content
>>> requests.get("http://example.com").text

>>> import pycurl                        
>>> c = pycurl.Curl()                    
>>> c.setopt(c.URL, 'http://example.com')
>>> c.perform()

Answer 1

如果您要查找有关Last-Modified，Cache-Control等的信息，在requests中，您可以检出headers。

>>> import requests
>>> req = requests.get("http://example.com")
>>> req.headers
{'Content-Encoding': 'gzip', 
'Accept-Ranges': 'bytes', 
'Cache-Control': 'max-age=604800', 
'Content-Type': 'text/html; charset=UTF-8', 
'Date': 'Mon, 21 Jan 2019 01:13:53 GMT', 
'Etag': '"1541025663"', 
'Expires': 'Mon, 28 Jan 2019 01:13:53 GMT', 
'Last-Modified': 'Fri, 09 Aug 2013 23:54:35 GMT', 
'Server': 'ECS (dca/24A0)', 
'Vary': 'Accept-Encoding', 
'X-Cache': 'HIT', 
'Content-Length': '606'}

Answer 2

在Python 3.7.2中没有任何第三方软件包（例如requests）

>>> import urllib.request
>>> dict(urllib.request.urlopen("http://example.com").headers)
{'Accept-Ranges': 'bytes', 'Cache-Control': 'max-age=604800', 'Content-Type': 'text/html; charset=UTF-8', 'Date': 'Mon, 21 Jan 2019 02:52:13 GMT', 'Etag': '"1541025663+gzip"', 'Expires': 'Mon, 28 Jan 2019 02:52:13 GMT', 'Last-Modified': 'Fri, 09 Aug 2013 23:54:35 GMT', 'Server': 'ECS (sjc/4E8B)', 'Vary': 'Accept-Encoding', 'X-Cache': 'HIT', 'Content-Length': '1270', 'Connection': 'close'}

docs

相当于`curl -v http：// example.com /`的Python

2 个答案: