Apache Oozie无法加载ShareLib

时间:2015-02-24 17:15:46

标签: hadoop oozie

我得到了以下oozie.log:

org.apache.oozie.service.ServiceException: E0104: Could not fully initialize service [org.apache.oozie.service.ShareLibService], Not able to cache sharelib. An Admin needs to install the sharelib with oozie-setup.sh and issue the 'oozie admin' CLI command to update the sharelib

我运行以下命令:

oozie-setup.sh sharelib create -fs hdfs://localhost:54310
oozied.sh start

hdfs dfs -ls /user/hduser/share/lib
15/02/24 18:05:03 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Found 3 items
drwxr-xr-x   - hduser supergroup          0 2015-02-24 17:19 /user/hduser/share/lib/lib_20150224171855
drwxr-xr-x   - hduser supergroup          0 2015-02-24 17:19 /user/hduser/share/lib/lib_20150224171908
drwxr-xr-x   - hduser supergroup          0 2015-02-24 17:29 /user/hduser/share/lib/lib_20150224172857 

但是:

oozie admin -shareliblist -oozie http://localhost:11000/oozie
[Available ShareLib]

oozie admin -sharelibupdate -oozie http://localhost:11000/oozie
null

我的oozie-site.xml包含:

<property>
    <name>oozie.service.WorkflowAppService.system.libpath</name>
    <value>/user/${user.name}/share/lib/</value>
</property>

<property>
    <name>oozie.service.HadoopAccessorService.hadoop.configurations</name>
    <value>*=hadoop-conf</value>
</property>

你知道我的错误吗?

2 个答案:

答案 0 :(得分:8)

我努力修复同样的错误几天,我终于解决了。

它与在我的本地文件系统上寻找sharelib文件夹而不是我的hdfs的sharelib服务有关。

所以要解决它:

停止oozie

编辑conf / oozie-site.xml

<property>        
      <name>oozie.service.HadoopAccessorService.hadoop.configurations</name> 
      <value>*=/usr/local/hadoop/etc/hadoop/</value>
</property>

重启oozie。

和Voila!

默认情况下,该属性的值设置为* = hadoop-conf。我还是不知道hadoop-conf应该指出什么,但在我的情况下,它不是配置文件夹hadoop所以我改为* = / usr / local / hadoop / etc / hadoop /。 / p>

答案 1 :(得分:5)

在我的oozie-4.2.0中,默认设置* hadoop-conf指向

中的子文件夹
path/to/oozie/conf/hadoop-conf

就我而言,有一个文件&#39; core-site.xml&#39;,我认为应该是配置文件。我在此文件中添加了以下属性。

<property>
    <name>fs.defaultFS</name>
    <value>hdfs://localhost:9000</value>
</property>

重新启动oozie,问题已解决。