我正在尝试在Docker容器上运行Spark:
val input = sc.textFile("data/trips/*")
println input
input.map(_.split(",")).count()
但是,对于任何类型的代码我都会收到此错误:
File name too long
点击此处http://timothyfox.net/?p=8后,我意识到您必须更改pom.xml
或build.sbt
。
但是,我的代码是打包为docker容器的练习的一部分,所以我不知道它是如何组织的。我查看了docker容器,找到了一个pom.xml
文件,我在其中添加了:
<arg>-Xmax-classfile-name</arg>
<arg>128</arg>
但没有改变。