我有配置单元表,它以JSON格式存储为文本文件格式。从色相中查询时返回数据。但是,如果在hive CLI或pyspark数据帧中运行相同的查询,则会抛出以下错误。 “
失败:RuntimeException MetaException(message:java.lang.ClassNotFoundException类 找不到org.openx.data.jsonserde.JsonSerDe)
”
对于火花,我尝试如下添加“ https://mvnrepository.com/artifact/org.apache.hive.hcatalog/hive-hcatalog-core”页面中的罐子。我尝试过此页面上的大多数jar版本。
pyspark2 --jars文件:///path/to/jar/file/hive-hcatalog-core-0.13.0
问题1:为什么它在色相下工作正常,但在蜂巢cli和pyspark中却不行。
问题2:如何解决此问题
问题3::在mvn页面上,我可以看到很多jar版本。在下载jar时,我们应该如何确定jar的版本。