spark.akka.frameSize还能在spark 2.x中运行吗?

时间:2018-04-12 14:13:06

标签: apache-spark

我们知道当spark版本< = 1.6.0;

时,底层通信框架是akka时spark.akka.frameSize将起作用

我的问题是,当火花版本是2.x akka由netty重新获得时,这个参数仍然有效吗?或者是否有类似于netty的类似参数与akka的spark.akka.frameSize相同?谢谢你的任何建议!

1 个答案:

答案 0 :(得分:2)

我认为您可以调整spark.rpc.message.maxSize配置参数。记录在案here