我的荷兰人在hadoop上跑,我想检查一下nutch运行的日志, 但找不到像独立的nutch日志那样的输出日志。
答案 0 :(得分:3)
如果您在hadoop上运行nutch,则会生成与每个映射器和每个阶段的reducer相对应的日志。它的位置是{HADOOP_LOG_DIR}/userlogs/<task id>/syslog
答案 1 :(得分:1)
如果您在分布式或伪分布式模式下运行Hadoop,那么您应该能够使用map reduce管理界面(例如主节点的端口50030)访问每个作业的日志。
有关Hadoop中日志的位置,请参阅this link。