交互式Python中的多处理包

时间:2015-01-13 22:52:33

标签: python multiprocessing interactive

我有以下代码test.py:

#multiprocessing in the interactive Python 

import time
from multiprocessing import Process, Pipe

def MyProcess(a):

    while(1):
       time.sleep(1)
       a.send("tic")    

if __name__ == "__main__":

    a, b = Pipe() 

    p = Process(target=MyProcess, args=(a,))
    p.start()

    while(1):
       msg=b.recv()
       print(msg)

如果我在DOS shell中执行它会正常工作" python test.py" 但是如果我使用" Execute File"它就不起作用。来自IEP(Pyzo)。

Traceback (most recent call last):
  File "<string>", line 1, in <module>
  File "C:\pyzo2014a_64b\lib\multiprocessing\spawn.py", line 106, in spawn_main
    exitcode = _main(fd)
  File "C:\pyzo2014a_64b\lib\multiprocessing\spawn.py", line 116, in _main
    self = pickle.load(from_parent)
AttributeError: Can't get attribute 'MyProcess' on <module '__main__' (built-in)>

我发现这是一个记录在案的问题&#39;。请检查以下链接的答案。

multiprocessing breaks in interactive mode

这是否意味着我不应该使用交互式Python中的多处理包?这是否意味着我无法从IPython控制台创建进程? 对此的任何澄清都将受到高度赞赏

1 个答案:

答案 0 :(得分:5)

正确,您不能使用解释器中的multiprocessing ...主要是因为pickle不知道如何序列化交互功能。但是,如果使用名为multiprocessing的{​​{1}}分叉,则可以从解释器中执行所需操作。这是有效的,因为pathos.multiprocessing使用pathos.multiprocessingdill知道如何序列化解释器中定义的函数(和其他对象)。

dill

在此处获取>>> from pathos.multiprocessing import ProcessingPool as Pool >>> >>> p = Pool(4) >>> def squared(x): ... return x**2 ... >>> def pow(x,y): ... return x**y ... >>> a = range(10) >>> b = range(10,0,-1) >>> >>> p.map(squared, a) [0, 1, 4, 9, 16, 25, 36, 49, 64, 81] >>> res = p.amap(pow, a, b) >>> print "asynchronous, and with multiple inputs!" asynchronous, and with multiple inputs! >>> res.get() [0, 1, 256, 2187, 4096, 3125, 1296, 343, 64, 9] https://github.com/uqfoundation