我有一个表报告,其中包含 id,country,service,amount,count 字段。当我尝试在hive中执行以下查询时:
select * from report
我从蜂巢中获取了正确的数据。但是当我在select语句中指定列名时:
select service from report
我得到以下异常:
java.io.IOException: Cannot run program "/home/biadmin/hadoop/bin/hadoop" (in directory "/root"): error=13, Permission denied
at java.lang.ProcessBuilder.start(ProcessBuilder.java:1041)
at java.lang.Runtime.exec(Runtime.java:617)
at java.lang.Runtime.exec(Runtime.java:450)
at org.apache.hadoop.hive.ql.exec.mr.MapRedTask.execute(MapRedTask.java:262)
at org.apache.hadoop.hive.ql.exec.Task.executeTask(Task.java:153)
at org.apache.hadoop.hive.ql.exec.TaskRunner.runSequential(TaskRunner.java:85)
at org.apache.hadoop.hive.ql.Driver.launchTask(Driver.java:1503)
at org.apache.hadoop.hive.ql.Driver.execute(Driver.java:1270)
at org.apache.hadoop.hive.ql.Driver.runInternal(Driver.java:1088)
at org.apache.hadoop.hive.ql.Driver.run(Driver.java:911)
at org.apache.hadoop.hive.ql.Driver.run(Driver.java:901)
at org.apache.hadoop.hive.cli.CliDriver.processLocalCmd(CliDriver.java:268)
at org.apache.hadoop.hive.cli.CliDriver.processCmd(CliDriver.java:220)
at org.apache.hadoop.hive.cli.CliDriver.processLine(CliDriver.java:423)
at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:792)
at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:686)
at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:625)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.util.RunJar.main(RunJar.java:212)
Caused by: java.io.IOException: error=13, Permission denied
at java.lang.UNIXProcess.forkAndExec(Native Method)
at java.lang.UNIXProcess.<init>(UNIXProcess.java:135)
at java.lang.ProcessImpl.start(ProcessImpl.java:130)
at java.lang.ProcessBuilder.start(ProcessBuilder.java:1022)
... 21 more
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
我同时得到这个错误,意味着我有时会得到它,有时它工作正常。我尝试在hive-site.xml和hdfs-site.xml中添加以下内容,但仍然遇到同样的问题。
蜂房-site.xml中
<property>
<name>hive.cli.print.current.db</name>
<value>true</value>
</property>
HDFS-site.xml中
<property>
<name>dfs.permissions</name>
<value>false</value>
</property>
有什么方法可以永久性地避免这个问题。谢谢大家。
答案 0 :(得分:0)
问题很简单......假设我的hadoop安装在 hduser
我使用了命令:
su hduser
这不会设置所有参数并在/ root home文件夹中打开。因此,存在许可差异。
因此,请使用命令:
su - hduser
这将设置所需的参数,并直接在 hduser的主页中打开。这不会给出错误。
关于串联时的错误,我曾经使用 hduser 用户直接输入服务器,但没有给出错误。但是通过root进入服务器然后切换用户会出错。