如何查找pig作业正在运行的节点

Question

我用oozie跑了一个猪的工作流程。工作成功完成，但现在我想知道工作的哪个奴隶或主人。我的输入文件是一个1.4GB的文件，它分布在节点上（1个主服务器和2个从服务器）。

而且我还想知道猪在每个节点上执行了多少时间。

提前谢谢

Answer 1

将您的网络浏览器指向“JobTracker_Machine：50030”，它会预设MapReduce webUI。在这里，您将找到您运行的所有工作（Running, Completed and Retired）。单击要分析的作业，它将为您提供所需的所有信息，包括运行特定任务的节点以及完成任务所需的时间。

HTH

Answer 2

转到Oozie Web控制台并单击工作流程（其中包含pig节点）。单击工作台作业将显示一个对话框（针对您的工作流程），其中包含工作流程中所有操作节点的详细信息。选择猪节点（您要分析它），将出现一个详细的对话框，其中包含该作业的作业跟踪器的URL。 在那里你会找到你正在寻找的所有细节。