Spark:如何为spark处理创建productiuon作业

时间:2016-06-30 08:55:39

标签: apache-spark apache-spark-sql

我使用spark-sql来运行作业,生产命令应该是什么? 我可以使用spark-sql作为生产作业命令吗?

谢谢, Virendra

2 个答案:

答案 0 :(得分:0)

不完全确定您的生产意义是什么。你能详细说明一下吗?

spark-sql是专为交互式探索数据而设计的。它以REPL启动java进程。

或许把代码放在maven项目中更直接。像this

一样

答案 1 :(得分:0)

您应该使用 SPARK_HOME / bin / spark-submit 在群集上运行代码。您可以在此处找到更多信息:http://spark.apache.org/docs/latest/submitting-applications.html