我在理解使用Scala / Spark-shell和Hadoop环境开发的逻辑体系结构时遇到了一些问题。
为了更好地描述逻辑体系结构,我绘制了一个小模式:
如图所示,我在个人电脑上安装了Eclipse,我想在远程模式下从我的电脑上运行scala脚本到Hadoop。
现在我有VPN连接,我可以从shell处理我的scala程序和PUtty。实际上,每次我必须启动Scala脚本时,我都会将文件.scala
从我的电脑传输到使用WinSCP的远程计算机,因此我直接从远程计算机上抓取程序。每次我必须转移文件让我工作浪费。
现在的问题是:有没有办法从我的个人电脑到远程集群启动脚本,而不是通过PUtty?