将Scala对象写入Parquet的最佳方法是什么?

时间:2014-12-02 04:42:52

标签: scala hadoop thrift data-warehouse parquet

我有一个从JSON创建的Scala案例类,比如case类Person(age:Int,name:String)。我知道我不能把JSON写到Parquet。

我可以将案例类直接写入Parquet,还是需要使用其他格式,如Scrooge / Thrift或Avro?最适合使用哪些API?

1 个答案:

答案 0 :(得分:0)

我认为您需要实现ParquetWriteSupport类来编写自定义类。