python多处理中更复杂的对象共享

Question

我可以共享复合对象，例如pandas python多处理中并行进程之间的数据帧？

Answer 1

您可以尝试使用 multiprocessing.Manager ，就像here所描述的那样。 还有PySpark，其own dataframe structure具有固有的并行化，并且可以转换为pandas，反之亦然。