以交互方式从JAVA运行Spark-Shell

时间:2018-06-01 12:51:08

标签: shell apache-spark processbuilder

我正在尝试构建一个UI,它为开发人员提供了一个以交互方式构建其spark代码的实用程序。 为此,我希望能够通过在spark shell中运行查询而不是spark-submit来验证spark查询。我想从我的Java代码中实现这一点。 它可行吗?我可以使用ProcessBuilder启动spark shell但是如何传递后续命令并捕获spark shell输出以显示在屏幕上?

//Spark shell
        builder = new ProcessBuilder("/Users/xyz/Downloads/spark-2.2.0-bin-hadoop2.7/bin/spark-shell");

0 个答案:

没有答案