我在笔记本电脑中设置了以下内容。
我已经将hive-site.xml从hive / conf放到了spark / conf。当我转到spark-shell时,我可以使用sql context在hive中创建表并查询它们。我可以访问配置单元中的所有表。我的问题是,当我使用Eclipse IDE时,我无法连接到现有的配置单元。
Eclipse可以连接到现有的spark master来提交作业,我可以在UI中看到作业但是当我使用sparkSession连接到hive时,它总是创建自己的Derby数据库。我进行了广泛的搜索,但我无法弄明白。
我不确定还有什么要找。
答案 0 :(得分:0)
您的hive-site.xml不在路径中。尝试将配置添加到类路径