如何设置Vora Table分区大小？

Question

我已经设置了＆＃39; partitionSize＆＃39;多个不同值的选项，无论数量多少，我似乎都得到相同数量的分区。根据文档，应该与HDFS块大小相对应。有什么我想念的东西。

HDFS块大小为64M

CREATE TABLE TABLE_TEST（DEFINITION_INFO） 使用com.sap.spark.vora 选项（   tablename＆＃34; TABLE_TEST＆＃34;，   partitionSize＆＃34; 64＆＃34;，   路径＆＃34; /load_from_here/combined.csv"，   eagerLoad＆＃34; true＆＃34; ）

csv约为680M

Answer 1

参数的名称有点误导。它不是用于分区表，而是在将数据加载到表中时影响负载性能。在较新的版本中，它可能会被重命名以避免这种混淆。