一种pythonic方法将循环打包成函数来静音变量?

时间:2018-04-24 00:46:09

标签: python loops dictionary product syntactic-sugar

我不确定我应该这么详细,如果这太简洁,请详细说明。

有没有办法将for a,b,c in product(d['a'],d['b'],d['c']):打包成一些语法糖,所以我只需要为这个循环本身输入一次静音变量a,b,c

这样的事情可能是什么?

my_for_loop('a','b','c'): 
  API_Call1(a)
  API_Call2(b,c)

而不是

for a,b,c in product(d['a'],d['b'],d['c']):
  API_Call1(a)
  API_Call2(b,c)

my_for_loop怎么样?我在如何从概念上处理这个问题上有点迷失。

更多细节:

我有一个API,需要为某些列表的笛卡尔积的每个单元格调用它。我正在使用产品功能来避免嵌套循环。假设我们有一个list1和一个list2,它可以通过以下方式完成

from itertools import product
for a,b in product(list1,list2):
  API_Call(a,b)

我创建了一个dictionary_of_lists={'a':list1,'b':list2,'c':list3...} 能够像这样写出来

for a,b in product(dictionary_of_lists['a'],dictionary_of_lists['b']):
  API_Call(a,b)

for c,b in product(dictionary_of_lists['c'],dictionary_of_lists['b']):
  API_Call(c,b)

for e,f,g,h in product(dictionary_of_lists['e'],dictionary_of_lists['f'],dictionary_of_lists['g'],dictionary_of_lists['h'],):
  API_Call1(e,f,g,h)
  API_Call2(e,h)
...

所以基本上循环创建的变量在API调用中使用,否则它们是静音的,它们的名称无关紧要。这些电话中有很多,而且它们周围有一些错综复杂的逻辑。所以我想保持循环本身简单,我是否需要更改变量,我不必为每个这样的循环在三个位置更改它们。

my_for_loop('a','b'):
  API_Call(a,b)

my_for_loop('b','c'):
  API_Call(c,b)

my_for_loop('e','f','g','h'):
  API_Call1(e,f,g,h)
  API_Call2(e,h)
...

此外: 我已经简化了一些事情,但是出乎意料地模糊不清的地方却被惊讶了:-)

感谢目前为止的所有答案!

这是一个很好的建议,有dproduct包装。我确实有一个,只是不想抢先提出你的建议。

变量名称对代码逻辑是静音的,但为了维护代码,它们有一些含义。所以它们不能由一个字母组成。

为了进一步澄清:我想避免三次使用变量名 - 在“for ...”部分,调用dproduct包装器和API调用中。两次 - 在调用包装器和API调用中是可以的,因为它反映了逻辑。

以下是我现在的代码的更详细示例。

def dproduct(d, keys):
  subset_d = dict((k, d[k]) for k in keys if k in d)
  return product(*[subset_d.values()])

for foo, bar in dproduct(d, ['foo','bar',]):
  some logic here
    if API_Call1(foo,bar) == 123: 
       some other stuff, API_Call6(quux,baz,)         
  some more stuff and a call to another dproduct
  for quux, sl, baz in dproduct(d, ['quux','sl','baz',]):
    blah blah, API_Call2(quux,sl,baz) 
    other stuff

 for pa, mf in dproduct(d, ['pa','mf',]):
  API_Call4(pa,mf)

 for quux, sl, baz in dproduct(d, ['quux','sl','baz',]):
  further logic
    if API_Call1(quux, sl, baz) == 342: some other stuff
  some more stuff and a call to another dproduct
  for pa,mf in dproduct(d, ['pa','mf',]):
    API_Call3(pa,mf)

2 个答案:

答案 0 :(得分:2)

首先,您可以编写一个product包装器,如下所示:

def dproduct(d, keys):
    return product(*(d[key] for key in keys))

for a, b, c in dproduct(d, 'abc'):
    API_Call1(a)
    API_Call2(b, c)

(请注意,您可以使用operator.itemgetter而不是genexpr编写相同的内容;这取决于您发现哪些内容更具可读性。)

当然,我正在利用所有密钥都具有单字符名称的事实,并且字符串是其字符的可迭代。如果你的真实姓名不是单一字符,你必须稍微冗长:

for a, b, c in dproduct(d, ('spam', 'eggs', 'beans')):

...此时您可能需要考虑在参数中使用*args而不是args,或者,如果您不介意被黑客攻击:

def dproduct(d, keys):
    return product(*(d[key] for key in keys.split()))

for a, b, c in dproduct(d, 'spam eggs beans'):

然后你可以走得更远,并在你的电话周围写封包。例如,如果您产生值的值而不是值的元组,则可以使用这些词组,就像我们使用列表的原始词典一样:

def dproduct(d, keys):
    for vals in product(*(d[key] for key in keys)):
        yield dict(zip(keys, vals))
def call1(d, keys):
    return API_Call1(*(d[key] for key in keys))
def call2(d, keys):
    return API_Call2(*(d[key] for key in keys))

for vals in dproduct(d, 'abc'):
    call1(vals, 'a')
    call2(vals, 'bc')

或者,如果您的API_Call*函数可以使用关键字而不是位置参数,那么您可以使事情更简单,更清晰:

def dproduct(d, keys):
    for vals in product(*(d[key] for key in keys)):
        yield dict(zip(keys, vals))
def dselect(d, keys):
    return {key: d[key] for key in keys}
for vals in dproduct(d, 'abc'):
    API_Call1(**dselect(vals, 'ab'))
    API_Call2(**dselect(vals, 'c'))

如果您不能使用关键字参数,并且您有很多API_Call*个函数,那么您可以更进一步并动态生成包装器:

def apiwrap(apicall):
    @functools.wraps(apicall)
    def wrapper(d, keys):
        return apicall(*(d[key] for key in keys))
    return wrapper
apicall1 = apiwrap(API_Call1)
apicall2 = apiwrap(API_Call2)
# etc.

虽然如果你有很多这些,你可能想把它们放在一个列表或一个字典中......

如果你想变得太聪明,你甚至可以根据API函数的签名动态地拆分元组:

def dispatch(d, keys, *calls):
    for vals in product(*(d[key] for key in keys)):
        it = iter(vals)
        for call in calls:
            args = islice(it, len(signature(call).parameters))
            call(*args)
dispatch(d, 'abc', API_Call1, API_Call2)

(如果您的函数体非常小,您可能希望通过在函数顶部执行argcounts = [len(signature(call).parameters for call in calls]然后使用zip(calls, argcounts)而不是每次使用inspect来加快速度在内循环中。)

无论如何,在不了解你的程序的情况下,很难确切地说出你能做什么,以及你应该做什么 - 大多数这些想法一般都不是Pythonic,即使它们在某些特殊情况下可能有用

但无论哪种方式,它们都应该作为您可以轻松完成的各种事情的示例,而不必陷入涉及localsglobalsgetframe的可怕黑客攻击。

答案 1 :(得分:1)

您无法轻松地将变量插入本地命名空间(可能但不应该没有正当理由)。因此,使用字典来保存您的命名值。

我已经使用operator.itemgetter函数来获取各种API调用所需的函数,并将您的产品函数包装在生成器中。

from operator import itemgetter
from itertools import product

class DictCaller(dict):
    def __call__(self, fn, *args):
        fn(*map(itemgetter(self), args))

def my_product(d, *args):
    for xs in product(*map(itemgetter(d), args)):
        yield DictCaller(zip(args, xs))

for caller in my_product(*'abc'):
    caller(API_CALL, *'ab')
    caller(API_CALL1, *'bc')