Shell脚本：将变量传递到spark-shell会话

Question

我正在尝试将变量传递给spark-shell会话。本质上，我的目标是创建一个代码，该代码将逐行读取文本文件并执行文本文件中存在的SQL查询。为此，我需要能够将“ p”的值传递到spark会话中。但我无法这样做：

OAuth2RestTemplate

上面的代码给我以下错误：

RestTemplate

在此先感谢您的帮助！

Answer 1

当您编写：spark-shell << 'EOF'时，您在明确告诉外壳程序不要在heredoc中插入变量。删除引号并输入：

spark-shell << EOF