为hadoop工具设置其他类路径

Question

如何动态设置其他类路径，以便可以从hadoop工具类访问jar？我正在通过“hadoop jar”来完成我的工作。我需要类似“-libjars”开关的东西，不幸的是它只适用于映射器和缩减器，我的工具实现没有看到“libjars”提供的罐子

导出“HADOOP_CLASSPATH = $ HADOOP_CLASSPATH：/ path / to / my.jar＆amp;＆amp; hadoop jar ...”似乎使工具可以访问“my.jar”，但是然后工作中的库就在了“/ lib”文件夹变得无法访问。

Answer 1

此外，如果您与Hadoop发行版中包含的某些jar有冲突，您可以export HADOOP_USER_CLASSPATH_FIRST=true。也许对某人有用。