用Livy提交python代码

时间:2018-03-12 14:31:01

标签: apache-spark pyspark livy

如何向Livy提交代码pyspark? 我使用了这个,它的工作原理

curl localhost:8998/sessions/0/statements -X POST -H 'Content-Type: application/json' -d '{"code":"srdd.get(\"ak\")"}'

但现在我要传递命令,例如

curl localhost:8998/sessions/69/statements -X POST -H 'Content-Type: application/json' -d  '{“code”: textwrap.dedent("""
from pyspark.sql import *
from pyspark.sql.types import *
B = spark.sql("SELECT * FROM A")
B.collect()”””
}'

但是语法错误...... 谁知道写这个命令的恰当权利?

由于

谢谢

0 个答案:

没有答案