通过HADOOP Job api启用JMX

Question

我想通过JMX连接到map并减少任务。我如何传递像

这样的JVM启动标志

   -Dcom.sun.management.jmxremote.port=9010

..来映射和减少任务？

Answer 1

如果运行以下命令，它会将所有属性添加到mapper / reducer任务JVM。

-D mapreduce.map.java.opts="-Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port=9010 -Dcom.sun.management.jmxremote.local.only=true-Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false" -D mapreduce.reduce.java.opts="<same as for map>"