使用具有参数的Apache Livy触发spark应用程序

Question

我正在尝试从Apache Livy触发spark应用程序，但是我似乎无法使其正常工作。我正在使用最新版本（0.5），并根据文档https://livy.incubator.apache.org/examples/传递了args，但是从应用程序运行时的日志中，我发现没有考虑任何参数。

curl http://livy:8998/batches -X POST -H 'Content-Type: application/json' -d '{
    "file": "hdfs path", 
    "className": "Main", 
    "name": "app",
    "args":[“arg1 value”, “arg2 value”]
}'

我想念什么？

Answer 1

您使用了错误的标点符号。

改变

@Configuration("MyPasswordConfiguration")
@EnableConfigurationProperties(CasConfigurationProperties.class)
public class MyPasswordConfiguration {

    @Bean
    public PasswordManagementService passwordChangeService() {
        ...
    }
}

到

"args":[“arg1 value”, “arg2 value”]