Spark在单个节点上：速度提升

Question

在单个节点上使用Spark（特别是MLlib）是否有任何意义（除了学习这项技术的目标）？ 速度有任何改善吗？

Answer 1

您是否将此与使用非Spark机器学习系统进行比较？

这实际上取决于您可能使用的其他库的功能。

例如，如果您已将所有训练数据存储在Parquet文件中，则Spark可以非常轻松地读取这些文件并使用，无论是在1台机器上还是100台。