指定pyspark启动的jvm的选项

Question

pyspark脚本在启动连接到指定的jvm时使用的jvm选项如何/在哪里？

我特别感兴趣的是指定jvm调试选项，例如。

-agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=5005

感谢。

Answer 1

pyspark使用bin/spark-class脚本启动您在终端/控制台中运行的客户端。您可以添加JAVA_OPTS所需的任何选项：

JAVA_OPTS="$JAVA_OPTS -Xmx=2g -Xms=1g -agentlib:jdwp=transport=dt_socket,server=y..."