我的python脚本通过以下方式从配置单元表获取数据:
conf = SparkConf().setAppName("myapp")
sc = SparkContext(conf=conf)
sqlContext = HiveContext(sc)
textsql = "SELECT * from hivetable"
result = sqlContext.sql(textsql)
发生了一件非常奇怪的事情:向HUE中启动的同一查询为我提供了正确的结果,但是从.py脚本中,我得到了错误的行... 我打印出了textsql,因此可以肯定地说,我对HUE和python使用相同的查询
我的问题是返回的行数,python返回的行数更少。
如何解决此问题?