如何使用第三方Jars运行PySpark，例如fuzzywuzzy？

Question

尝试--jars选项和--driver-class-jars等。它仍然给我'没有模块fuzzywuzzy'发现错误。

Answer 1

尝试pyspark --packages me.xdrop:fuzzywuzzy:1.1.8

另请参阅https://stackoverflow.com/a/44153456/3811916了解其他一些选项，具体取决于您所需的工作流程/环境。