我们的hortonworks安装存在问题,特别是我们的Spark版本1.6。
我们有一个流式火花应用程序,其中一个失败,出现此错误:
https://github.com/apache/spark/pull/10621
我知道,很明显已经解决了,如果我下载最新版本的spark 1.6我解决了这个问题,但在我的情况下,我有Hortonworks 2.5版本,我无法删除我当前的安装和donwnload新安装,实际上我不知道我是否可以删除我当前的hortonworks安装并再次使用最新版本的spark重新安装,因为我认为如果这样做我会重新安装相同版本的同一个bug。
无论如何,在github存储库中他们解释我应该应用github的补丁,但这是我的问题。
如何在我的安装中应用此补丁并重新编译所有火花安装?一些如何或步骤..............
提前致谢。