显示INFO ipc.Client:一旦hadoop升级到cdh5.2.0,重试连接到服务器

时间:2014-11-17 06:36:56

标签: hadoop mapreduce yarn

将我的Hadoop集群(CDH)升级到cdh5.2.0

但是一旦我用迭代运行我的Job,它就会在第一次迭代Job之后显示。

14/11/17 09:29:44 INFO ipc.Client: Retrying connect to server: /xx.xx.xx.xx:xxxx. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=3, sleepTime=1000 MILLISECONDS)
14/11/17 09:29:45 INFO ipc.Client: Retrying connect to server: /xx.xx.xx.xx:xxxx. Already tried 1 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=3, sleepTime=1000 MILLISECONDS)
14/11/17 09:29:46 INFO ipc.Client: Retrying connect to server: /xx.xx.xx.xx:xxxx. Already tried 2 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=3, sleepTime=1000 MILLISECONDS)

我在Driver类中有一些计算。它适用于小型数据集。当我尝试运行1gb数据时,显示上面的错误。

似乎在我的第一份工作之后,一些计算在驱动程序类中完成,并且在计算之后,下一个工作开始。但我认为它不是等待驱动程序类计算的时间花费(因为它是1 gb文件需要很长时间才能进行驱动程序计算,但它正在等待小文件,因为计算量较少)并抛出上述错误。 / p>

在之前的版本中运行良好。

我是否在安装过程中遗漏了任何内容,无论是报告时间还是睡眠......?

为什么会这样? 公开建议

0 个答案:

没有答案