在hadoop上运行nutch,nutch的日志在哪里?

时间:2012-10-16 06:43:05

标签: logging hadoop nutch

我的荷兰人在hadoop上跑,我想检查一下nutch运行的日志,  但找不到像独立的nutch日志那样的输出日志。

2 个答案:

答案 0 :(得分:3)

如果您在hadoop上运行nutch,则会生成与每个映射器和每个阶段的reducer相对应的日志。它的位置是{HADOOP_LOG_DIR}/userlogs/<task id>/syslog

答案 1 :(得分:1)

如果您在分布式或伪分布式模式下运行Hadoop,那么您应该能够使用map reduce管理界面(例如主节点的端口50030)访问每个作业的日志。

有关Hadoop中日志的位置,请参阅this link