我在IronPython
应用程序中调用了一些C#
代码
这段代码工作正常,直到我决定将一个函数更改为在一个线程中运行
当在python线程中调用numpy函数时,抛出InsufficientMemoryException
异常
我搜索了解决方案,但没有找到。有人可以解释它为什么会发生,我该如何解决?
我认为只有当我有两个线程使用numpy
我运行这样的代码:
C#:
_python.functionA(); # _python was created with "Python.CreateEngine()"
_python.functionA(); # twice on purpose
的Python:
my_python_script.py
import threading
import time
import numpy
def blah():
print numpy.array([100,100,0])
def functionA():
t = threading.Timer(0,blah)
t.start()
time.sleep(2)
我得到了这个例外:
Exception in thread Thread-1:
Traceback (most recent call last):
File "c:\Program Files\IronPython 2.7.1\Lib\threading.py", line 552, in _Thread__bootstrap_inner
self.run()
File "c:\Program Files\IronPython 2.7.1\Lib\threading.py", line 756, in run
self.function(*self.args, **self.kwargs)
File "C:\workspace\my_python_script.py", line 113, in blah
print numpy.array([100,100,0])
MemoryError: Exception of type 'System.InsufficientMemoryException' was thrown.
由于
更新 13/07/14
即使我只运行一个线程并通过IronPython解释器而没有C#,我也会遇到此异常:
C:\>"c:\Program Files\IronPython 2.7.1\ipy.exe"
IronPython 2.7.1 (2.7.0.40) on .NET 4.0.30319.18063
Type "help", "copyright", "credits" or "license" for more information.
>>> execfile(r"c:\workspace\my_python_script.py")
>>> functionA()
>>> Exception in thread Thread-1:
Traceback (most recent call last):
File "c:\Program Files\IronPython 2.7.1\Lib\threading.py", line 552, in _Thread__bootstrap_inner
self.run()
File "c:\Program Files\IronPython 2.7.1\Lib\threading.py", line 756, in run
self.function(*self.args, **self.kwargs)
File "c:\workspace\my_python_script.py", line 6, in blah
print numpy.array([100,100,0])
MemoryError: Exception of type 'System.InsufficientMemoryException' was thrown.
答案 0 :(得分:2)
我认为numpy不是线程安全的。我有一个类似的问题,使用np.asarray()
线程会导致我的程序崩溃。似乎numpy的array
函数构建数组的方式不是线程安全的。我找到的方法是使用np.fromiter()
代替。显然,它是线程安全的。它稍慢,这使得如果它不使用线程,但它的工作原理。尝试将数据放入列表(或其他可迭代数据结构)中,并使用np.fromiter()
将其转换为numpy数组。
另外,只是你知道,它实际上在我的计算机上运行良好,所以它可能只是你没有足够的内存来处理线程(或者至少在使用numpy时没有。)