如何在Apache-Spark 2.x中使用java增量序列

时间:2017-08-08 11:55:40

标签: java apache-spark-sql apache-spark-2.0

如何在 Apache-Spark 2.x DataFrame ||中使用 java 进行增量序列 TempTable

换句话说,ApacheSpark中的 monotonically_increasing_id()函数的等价物是什么?> Sql-> java || API->爪哇

1 个答案:

答案 0 :(得分:0)

使用Scala:

val dataFrame1 = dataFrame0.withColumn("index",monotonically_increasing_id())

with java

import org.apache.spark.sql.functions;
Daraset<Row> dataFrame1 = dataFrame0.withColumn("index",functions.monotonically_increasing_id());