HDInsight Hive日志位置

时间:2015-10-07 08:40:17

标签: powershell azure hadoop hive hdinsight

我尝试使用Azure HDInsight和PowerShell(cmdlet Invoke-Hive)在Hive中创建一个外部表,但它在stderr中失败并出现以下错误:

Logging initialized using configuration in file:/C:/apps/dist/hive-0.13.0.2.1.15.1-1234/conf/hive-log4j.properties
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/C:/apps/dist/hadoop-2.4.0.2.1.15.1-1234/share/hadoop/common/lib/slf4j-log4j12-1.7.5.jar!/org/slf4j/impl/StaticLoggerBinder
.class]
SLF4J: Found binding in [jar:file:/C:/apps/dist/hbase-0.98.0.2.1.15.1-1234-hadoop2/lib/slf4j-log4j12-1.6.4.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation.
SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]
OK
Time taken: 1.256 seconds
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: org.apache.hadoop.fs.azure.AzureExce
ption java.util.NoSuchElementException: An error occurred while enumerating the result, check the original exception for details.)

所以我想完全按照说明所做并检查原始异常,但我似乎无法在任何地方找到完整的日志。有人能指出我到完整堆栈跟踪的正确位置吗?

编辑:我注意到只有在我的外部表位置目录中有Append Blob时才会出现此错误。 Append Blob不与HDInsight Hive一起工作吗?

1 个答案:

答案 0 :(得分:0)

HDInsight目前仅支持Block blobs ...

可以在HDInsight群集的主Azure存储帐户的用户文件夹中找到配置单元日志。 EX:

<StorageAccount>/user/<username>/<jobid>

如果这还不够,您还可以远程访问群集,并使用预安装的Web门户直接从头节点检查作业日志。