Python - 将列表列表分组

时间:2011-02-12 20:25:06

标签: python list performance memory-efficient

考虑以下简化案例:

lol = [['John','Polak',5,3,7,9],
       ['John','Polak',7,9,2,3],
       ['Mark','Eden' ,0,3,3,1],
       ['Mark','Eden' ,5,1,2,9]]

什么是 pythonic和内存+速度有效方法,根据前两个参数将此列表列表转换为列表列表:

lolol = [[['John','Polak',5,3,7,9],
          ['John','Polak',7,9,2,3]],
         [['Mark','Eden' ,0,3,3,1],
          ['Mark','Eden' ,5,1,2,9]]]

实际上 - 任何其他数据结构也可以,只要我有正确的层次结构。例如,我想到了下面的字典结构,但是创建它似乎没有足够的速度效率,并且内存可能会高于lolol解决方案。

dolol = {('John','Polak'):[[5,3,7,9],[7,9,2,3]],
         ('Mark','Eden') :[[0,3,3,1],[5,1,2,9]]}

3 个答案:

答案 0 :(得分:6)

列表:

from itertools import groupby
lolol = [list(grp) for (match, grp) in groupby(lol, lambda lst: lst[:2])]
# [[['John', 'Polak', 5, 3, 7, 9], ['John', 'Polak', 7, 9, 2, 3]],
#  [['Mark', 'Eden', 0, 3, 3, 1], ['Mark', 'Eden', 5, 1, 2, 9]]]

字典:

dolol = dict((tuple(match), [x[2:] for x in grp]) for (match, grp) in 
             groupby(lol, lambda lst: lst[:2]))
# {('John', 'Polak'): [[5, 3, 7, 9], [7, 9, 2, 3]],
#  ('Mark', 'Eden'): [[0, 3, 3, 1], [5, 1, 2, 9]]}

由于itertools.groupby适用于连续匹配,因此它假定已排序的输入(lol)。

答案 1 :(得分:5)

如果字典可以接受,则此代码将创建一个字典:

import collections
d = collections.defaultdict(list)
for name, surname, *stuff in lol:
    d[name, surname].append(nums)

请注意,这需要Python 3(extended iterable unpacking)。对于Python 2,请使用

for x in lol:
    name = x[0]
    surname = x[1]
    stuff = x[2:]

您可以折叠变量以保存行。

答案 2 :(得分:0)

用Python 2等价物来补充delnan的答案:

from collections import defaultdict

dolol=defaultdict(list)
for data in lol:
    dolol[data[0],data[1]].append(data[2:])