如何在Scala IDE中将本地spark连接到集群中的Hive

时间:2017-11-01 19:24:19

标签: apache-spark hive apache-spark-sql spark-streaming

请告诉我连接scala ide的步骤,我用它来开发连接到hive的spark。目前输出转到hdfs,然后我在它上面创建一个外部表。但是当火花流创建小文件时,性能变差了,我希望火花直接写入Hive,我不确定我的PC中应该为我的开发做些什么配置。

0 个答案:

没有答案