在哪里可以找到Spark / scala的Window函数的定义

Question

我正在尝试在rank中找到Spark函数的签名和解释，但找不到。我在哪里可以找到它？

我尝试了此https://spark.apache.org/docs/latest/api/scala/index.html#org.apache.spark.package，但在那里看不到rank

Answer 1

正如我在上面的注释中所写，rank在org.apache.spark.sql.functions object中。 Window是org.apache.spark.sql.expressions包中的类。您可以找到它here。

另一方面，

window（带有小写字母w）是org.apache.spark.sql.functions对象中的函数。就像在您的示例中一样，小写window与时间列一起使用来对行进行存储桶化或产生翻滚。 您可以在上面提供的链接中找到示例。只需在搜索栏中输入org.apache.spark.sql.functions对象的“窗口”即可。

希望对您有帮助！