如何调试PySpark的Scala执行？

Question

我能够在IntelliJ Idea中运行远程调试器，并将其连接到我的SparkSession。但是，在Scala代码上设置断点后（例如：我在'DataFrameReader.format（string）'上设置了一个断点），当我从pyspark会话中运行python代码时，它并没有在断点处停止。我该如何实现？