关于cosmos fi-lab SparkTask错误的hive查询

Question

我在cosmos fi-lab全局实例上执行配置单元查询时遇到问题。

首先，问题突然出现。 午餐前我的hive查询工作，午餐运行后我得到了这个错误。

java.sql.SQLException：查询返回非零代码：9，原因：FAILED：执行错误，从shark.execution.SparkTask返回代码-101     在org.apache.hadoop.hive.jdbc.HiveStatement.executeQuery（HiveStatement.java:194）     在eu.trentorise.DataProcessor.main（DataProcessor.java:72） 2014-12-01 09：57：07,812致命[DataProcessor-main] - 异常执行处理器：查询返回非零代码：9，原因：FAILED：执行错误，从shark.execution.SparkTask返回代码-101

一些细节：

• 我能够成功打开与默认数据库的JDBC连接
• 已成功创建外部表。
• 我运行的查询非常简单（SELECT COUNT（*）from HIVE_TABLE_NAME; ）

请帮帮我。

Answer 1

此时，重新启动Shark服务器和Shark运行的Spark群集后问题得以解决。这对我们来说是一个已知问题，因为任何原因Spark集群会在一定时间后消耗所有内存资源并崩溃。仍在努力找到原因。