Python:仅使用原始字符串发送POST请求

时间:2012-07-07 15:27:47

标签: python post custom-action

我想只使用原始字符串发送POST请求。

我正在写一个解析器。我已经加载了页面,并在firebug中看到了许多标题和正文的复杂请求:

__EVENTTARGET=&__EVENTARGUMENT=&__VIEW.... (11Kb or unreadable text)

如何再次发送此确切请求(标题+帖子正文)(将其作为一个巨大的字符串传递)?

像:

func("%(headers) \n \n %(body)" % ... )

我想通过我的脚本发送它(以及要处理的响应)并且不想手动创建参数和标题的字典。

谢谢。

2 个答案:

答案 0 :(得分:7)

另一个答案太大而且令人困惑,而且显示的不仅仅是你所要求的。我觉得我应该为未来的读者提供一个更简洁的答案:

import urllib2
import urllib
import urlparse

# this was the header and data strings you already had
headers = 'baz=3&foo=1&bar=2'
data = 'baz=3&foo=1&bar=2'

header_dict = dict(urlparse.parse_qsl(headers))

r = urllib2.Request('http://www.foo.com', data, headers)
resp = urllib2.urlopen(r)

你需要至少将标题解析回dict,但它的工作量很小。然后将其全部传递给新请求。

*注意:这个简洁的示例假设您的标头和数据正文都是application/x-www-form-urlencoded格式。如果标题是原始字符串格式,如Key: Value,那么请参阅另一个答案,了解有关解析该标题的更多详细信息。

最终,您不能只复制粘贴原始文本并运行新请求。它必须以适当的格式划分为标题和数据。

答案 1 :(得分:1)

import urllib
import urllib2

# DATA:

# option #1 - using a dictionary
values = {'name': 'Michael Foord', 'location': 'Northampton', 'language': 'Python' }
data = urllib.urlencode(values)

# option #2 - directly as a string
data = 'name=Michael+Foord&language=Python&location=Northampton'

# HEADERS:

# option #1 - convert a bulk of headers to a dictionary (really, don't do this)    

headers = '''
Host: www.http.header.free.fr
Accept: image/gif, image/x-xbitmap, image/jpeg, image/pjpeg,
Accept-Language: Fr
Accept-Encoding: gzip, deflate
User-Agent: Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 4.0)
Connection: Keep-Alive
'''

headers = dict([[field.strip() for field in pair.split(':', 1)] for pair in headers.strip().split('\n')])

# option #2 - just use a dictionary

headers = {'Accept': 'image/gif, image/x-xbitmap, image/jpeg, image/pjpeg,',
           'Accept-Encoding': 'gzip, deflate',
           'Accept-Language': 'Fr',
           'Connection': 'Keep-Alive',
           'Host': 'www.http.header.free.fr',
           'User-Agent': 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 4.0)'}

# send the request and receive the response

req = urllib2.Request('http://www.someserver.com/cgi-bin/register.cgi', data, headers)
response = urllib2.urlopen(req)
the_page = response.read()