Python Ray可以处理多大的数据？

Question

Python Ray对于机器学习应用程序看起来很有趣。但是，我想知道Python Ray可以处理多大。是受内存限制还是实际处理超出内存的数据？

Answer 1

当数据适合内存时，当前效果最佳（如果您在群集中，则意味着群集的聚合内存）。如果数据超出可用内存，则Ray将逐出最近最少使用的对象。如果以后需要这些对象，将通过重新运行创建它们的任务来重建它们。