如何使用Twisted(python)正确解析请求字符串

时间:2011-12-08 21:49:34

标签: python arrays parsing request twisted

我正在尝试实现一个简单的扭曲HTTP服务器,该服务器将响应从数据库加载切片的请求并返回它们。但是我发现它解释请求字符串的方式很奇怪。

这是我向服务器POST的内容:

curl -d "request=loadTiles&grid[0][x]=17&grid[0][y]=185&grid[1][x]=18&grid[1][y]=184" http://localhost:8080/fetch/

我期望request.args

{'request': 'loadTiles', 'grid': [{'x': 17, 'y': 185}, {'x': 18, 'y': 184}]}

Twisted如何解释request.args

{'grid[1][y]': ['184'], 'grid[0][y]': ['185'], 'grid[1][x]': ['18'], 'request': ['loadTiles'], 'grid[0][x]': ['17']}

是否可以让它自动解析请求字符串并为grid参数创建列表,还是必须手动执行?

我可以对网格参数进行json编码,然后对服务器端进行解码,但这似乎是一个不必要的黑客攻击。

2 个答案:

答案 0 :(得分:4)

我不知道为什么你会期望你的urlencoded数据根据一些特殊的非标准规则解码,或者为什么你会认为标准处理“奇怪”; [在查询字符串中并不特殊。什么软件以这种方式解码它们?

无论如何,这不是Twisted,而是Python(更一般地说,解析这些数据的web-standard方式)。您可以通过cgi.parse_qs功能以交互方式查看您将获得的数据类型。例如:

>>> import cgi
>>> cgi.parse_qs("")
{}
>>> cgi.parse_qs("x=1")
{'x': ['1']}
>>> cgi.parse_qs("x[something]=1")
{'x[something]': ['1']}
>>> cgi.parse_qs("x=1&y=2")
{'y': ['2'], 'x': ['1']}
>>> cgi.parse_qs("x=1&y=2&x=3")
{'y': ['2'], 'x': ['1', '3']}

我希望能为你解决问题。

答案 1 :(得分:1)

也许代替解析器,如何对你正在处理的request.args进行后期处理?

from pyparsing import Suppress, alphas, alphanums, nums, Word
from itertools import groupby

# you could do this with regular expressions too, if you prefer
LBRACK,RBRACK = map(Suppress, '[]')
ident = Word('_' + alphas, '_' + alphanums)
integer = Word(nums).setParseAction(lambda t : int(t[0]))
subscriptedRef = ident + 2*(LBRACK + (ident | integer) + RBRACK)


def simplify_value(v):
    if isinstance(v,list) and len(v)==1:
        return simplify_value(v[0])
    if v == integer:
        return int(v)
    return v

def regroup_args(dd):
    ret = {}
    subscripts = []
    for k,v in dd.items():
        # this is a pyparsing short-cut to see if a string matches a pattern
        # I also used it above in simplify_value to test for integerness of a string
        if k == subscriptedRef:
            subscripts.append(tuple(subscriptedRef.parseString(k))+
                                    (simplify_value(v),))
        else:
            ret[k] = simplify_value(v)

    # sort all the matched subscripted args, and then use groupby to
    # group by name and list index
    # this assumes all indexes 0-n are present in the parsed arguments
    subscripts.sort()
    for name,nameitems in groupby(subscripts, key=lambda x:x[0]):
        ret[name] = []
        for idx,idxitems in groupby(nameitems, key=lambda x:x[1]):
            idd = {}
            for item in idxitems:
                name, i, attr, val = item
                idd[attr] = val
            ret[name].append(idd)

    return ret

request_args = {'grid[1][y]': ['184'], 'grid[0][y]': ['185'], 'grid[1][x]': ['18'], 'request': ['loadTiles'], 'grid[0][x]': ['17']} 
print regroup_args(request_args)

打印

{'grid': [{'y': 185, 'x': 17}, {'y': 184, 'x': 18}], 'request': 'loadTiles'}

请注意,这也将单元素列表简化为第0个元素值,并将数字字符串转换为实际整数。