Apache giraph上的PageRank作业不生成输出文件

时间:2015-05-07 06:25:17

标签: giraph

命令:

hduser@bigtapp:/usr/local/giraph$ hadoop jar /usr/local/giraph/giraph-examples/target/giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.7.0-jar-with-dependencies.jar org.apache.giraph.GiraphRunner org.apache.giraph.examples.SimplePageRankComputation -vif org.apache.giraph.io.formats.JsonLongDoubleFloatDoubleVertexInputFormat -vip /user/input/tiny.txt -vof org.apache.giraph.io.formats.IdWithValueTextOutputFormat -op /user/output/SimplePageRank -w 1 -ca giraph.SplitMasterWorker=false

结果:

  

15/05/07 11:28:38 INFO utils.ConfigurationUtils:没有边输入格式   指定。确保您的InputFormat不需要一个。 15/05/07   11:28:38 INFO utils.ConfigurationUtils:无边输出格式   指定。确保您的OutputFormat不需要一个。 15/05/07   11:28:38 INFO utils.ConfigurationUtils:设置自定义参数   [giraph.SplitMasterWorker]到GiraphConfiguration 15/05/07中的[false]   11:28:39 WARN util.NativeCodeLoader:无法加载native-hadoop   适合您平台的库...使用builtin-java类在哪里   适用于15/05/07 11:28:39 INFO Configuration.deprecation:   不推荐使用mapreduce.job.counters.limit。相反,使用   mapreduce.job.counters.max 15/05/07 11:28:39 INFO   Configuration.deprecation:不推荐使用mapred.job.map.memory.mb。   相反,请使用mapreduce.map.memory.mb 15/05/07 11:28:39 INFO   Configuration.deprecation:不推荐使用mapred.job.reduce.memory.mb。   相反,请使用mapreduce.reduce.memory.mb 15/05/07 11:28:39 INFO   Configuration.deprecation:mapred.map.tasks.speculative.execution是   弃用。相反,请使用mapreduce.map.speculative 15/05/07 11:28:39   INFO Configuration.deprecation:mapreduce.user.classpath.first是   弃用。相反,请使用mapreduce.job.user.classpath.first 15/05/07   11:28:39 INFO Configuration.deprecation:mapred.map.max.attempts是   弃用。相反,请使用mapreduce.map.maxattempts 15/05/07 11:28:39   INFO job.GiraphJob:运行:由于禁用了检查点(默认),请执行   不允许任何任务重试(设置mapred.map.max.attempts = 1,旧   value = 4)15/05/07 11:28:39 INFO Configuration.deprecation:   mapred.job.tracker已弃用。相反,使用   mapreduce.jobtracker.address 15/05/07 11:28:39 INFO client.RMProxy:   在/0.0.0.0:8032 15/05/07 11:28:42连接到ResourceManager。信息   mapreduce.JobSubmitter:分裂数:1 15/05/07 11:28:42 INFO   mapreduce.JobSubmitter:提交作业的令牌:   job_1430974889906_0002 15/05/07 11:28:42 INFO impl.YarnClientImpl:   提交申请申请_1430974889906_0002 15/05/07 11:28:42   INFO mapreduce.Job:跟踪工作的网址:   http://bigtapp:8088/proxy/application_1430974889906_0002/ 15/05/07   11:28:42 INFO job.GiraphJob:跟踪网址:   http://bigtapp:8088/proxy/application_1430974889906_0002/ 15/05/07   11:28:42 INFO job.GiraphJob:等待资源......工作将开始   只有当它获得所有2个地图时15/05/07 11:28:55 INFO mapreduce.Job:   正在运行的职位:job_1430974889906_0002 15/05/07 11:28:55 INFO   mapreduce.Job:以uber模式运行的作业job_1430974889906_0002:false   15/05/07 11:28:55 INFO mapreduce.Job:地图100%减少0%15/05/07   11:28:55 INFO mapreduce.Job:工作job_1430974889906_0002失败了   状态FAILED由于:任务失败task_1430974889906_0002_m_000000作业   任务失败后失败。 failedMaps:1次失败减少:0

     

15/05/07 11:28:55 INFO mapreduce.Job:专柜:8个职位         失败的地图任务= 1启动地图任务= 1其他本地地图任务= 1         占用时隙中所有映射所花费的总时间(ms)= 5785总计   所有花费的时间减少占用的时隙(ms)= 0花费的总时间   按所有地图任务(ms)= 5785所有地图占用的总核心秒数   tasks = 5785所有地图任务占用的总兆字节数= 5923840

0 个答案:

没有答案