我想只使用原始字符串发送POST请求。
我正在写一个解析器。我已经加载了页面,并在firebug中看到了许多标题和正文的复杂请求:
__EVENTTARGET=&__EVENTARGUMENT=&__VIEW.... (11Kb or unreadable text)
如何再次发送此确切请求(标题+帖子正文)(将其作为一个巨大的字符串传递)?
像:
func("%(headers) \n \n %(body)" % ... )
我想通过我的脚本发送它(以及要处理的响应)并且不想手动创建参数和标题的字典。
谢谢。
答案 0 :(得分:7)
另一个答案太大而且令人困惑,而且显示的不仅仅是你所要求的。我觉得我应该为未来的读者提供一个更简洁的答案:
import urllib2
import urllib
import urlparse
# this was the header and data strings you already had
headers = 'baz=3&foo=1&bar=2'
data = 'baz=3&foo=1&bar=2'
header_dict = dict(urlparse.parse_qsl(headers))
r = urllib2.Request('http://www.foo.com', data, headers)
resp = urllib2.urlopen(r)
你需要至少将标题解析回dict,但它的工作量很小。然后将其全部传递给新请求。
*注意:这个简洁的示例假设您的标头和数据正文都是application/x-www-form-urlencoded
格式。如果标题是原始字符串格式,如Key: Value
,那么请参阅另一个答案,了解有关解析该标题的更多详细信息。
最终,您不能只复制粘贴原始文本并运行新请求。它必须以适当的格式划分为标题和数据。
答案 1 :(得分:1)
import urllib
import urllib2
# DATA:
# option #1 - using a dictionary
values = {'name': 'Michael Foord', 'location': 'Northampton', 'language': 'Python' }
data = urllib.urlencode(values)
# option #2 - directly as a string
data = 'name=Michael+Foord&language=Python&location=Northampton'
# HEADERS:
# option #1 - convert a bulk of headers to a dictionary (really, don't do this)
headers = '''
Host: www.http.header.free.fr
Accept: image/gif, image/x-xbitmap, image/jpeg, image/pjpeg,
Accept-Language: Fr
Accept-Encoding: gzip, deflate
User-Agent: Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 4.0)
Connection: Keep-Alive
'''
headers = dict([[field.strip() for field in pair.split(':', 1)] for pair in headers.strip().split('\n')])
# option #2 - just use a dictionary
headers = {'Accept': 'image/gif, image/x-xbitmap, image/jpeg, image/pjpeg,',
'Accept-Encoding': 'gzip, deflate',
'Accept-Language': 'Fr',
'Connection': 'Keep-Alive',
'Host': 'www.http.header.free.fr',
'User-Agent': 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 4.0)'}
# send the request and receive the response
req = urllib2.Request('http://www.someserver.com/cgi-bin/register.cgi', data, headers)
response = urllib2.urlopen(req)
the_page = response.read()