Question

我尝试升级Apache Zeppelin以使用Flink 1.4.2。检查Flink Zeppelin解释器的来源我没有找到任何看起来像Flink版本观点的材料，所以我只是将pom文件中的Flink版本更新为1.4.2并从源代码运行一个令人惊讶的新版本。运行Flink批处理示例笔记本（或我自己的流媒体示例）我收到以下错误，我无法正确理解

org.apache.thrift.transport.TTransportException
at org.apache.thrift.transport.TIOStreamTransport.read(TIOStreamTransport.java:132)
at org.apache.thrift.transport.TTransport.readAll(TTransport.java:86)
at org.apache.thrift.protocol.TBinaryProtocol.readAll(TBinaryProtocol.java:429)
at org.apache.thrift.protocol.TBinaryProtocol.readI32(TBinaryProtocol.java:318)
at org.apache.thrift.protocol.TBinaryProtocol.readMessageBegin(TBinaryProtocol.java:219)
at org.apache.thrift.TServiceClient.receiveBase(TServiceClient.java:69)
at org.apache.zeppelin.interpreter.thrift.RemoteInterpreterService$Client.recv_interpret(RemoteInterpreterService.java:274)
at org.apache.zeppelin.interpreter.thrift.RemoteInterpreterService$Client.interpret(RemoteInterpreterService.java:258)
at org.apache.zeppelin.interpreter.remote.RemoteInterpreter$4.call(RemoteInterpreter.java:233)
at org.apache.zeppelin.interpreter.remote.RemoteInterpreter$4.call(RemoteInterpreter.java:229)
at org.apache.zeppelin.interpreter.remote.RemoteInterpreterProcess.callRemoteFunction(RemoteInterpreterProcess.java:135)
at org.apache.zeppelin.interpreter.remote.RemoteInterpreter.interpret(RemoteInterpreter.java:228)
at org.apache.zeppelin.notebook.Paragraph.jobRun(Paragraph.java:437)
at org.apache.zeppelin.scheduler.Job.run(Job.java:183)
at org.apache.zeppelin.scheduler.RemoteScheduler$JobRunner.run(RemoteScheduler.java:305)
at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
at java.util.concurrent.FutureTask.run(FutureTask.java:266)
at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$201(ScheduledThreadPoolExecutor.java:180)
at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293)
at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
at java.lang.Thread.run(Thread.java:748)

很高兴了解我们如何在Zeppelin中使用最新的Flink版本。

Answer 1

Flink用户邮件列表中的recent thread涵盖了如何更新Zeppelin以使用Flink 1.4.2。电子邮件中包含一个未显示在存档中的图像，因此我将在此处包含相关信息：

你需要在Zeppelin中设置两个属性，它们指向zeppelin服务器使用的flink集群的jobmanager：

jobmanager.rpc.host
jobmanager.rpc.port

请注意，还有一些名为host和port的属性，但它们并未用于此目的。

你需要使用配置文件scala-2.11和Flink 1.4.2来构建Zeppelin。

Apache Zeppelin升级到Flink 1.4.2

1 个答案: