我正在寻找一种在集群上的Spark Shell中运行一些Scala代码的方法。有没有办法做到这一点?甚至在简单的Scala Shell中,我都可以实例化自己的spark上下文。 我试图在Intellij中寻找某种针对scala工作表的远程设置,但找不到任何有用的东西。
到目前为止,我可以连接到远程环境的唯一方法是运行调试器
答案 0 :(得分:0)
我遇到的最好的解决方案是在spark群集上安装jupyter笔记本。
现在,您可以使用浏览器并在集群上远程工作。否则,好的老式telnet也可以。