是否可以从数据库中获取数据集并对其进行排序?
我有一个非常大的表(72milion的行),我需要以并行的方式获取它们(如GenerateTableFetch所做的那样)但是按列排序,在我的情况下"url"
?
答案 0 :(得分:1)
如果您提供最大值列,则将在该列上排序查询(用于增量提取)。您可以尝试将ORDER BY子句添加到"附加WHERE子句"部分。
从NiFi 1.7.0开始(在撰写本文时尚未发布),您可以在QueryDatabaseTable中指定任意查询(通过NIFI-1706),请随意为GenerateTableFetch编写相应的Jira。我不确定将其添加到GTF的后勤工作,但如果它适用于QDT,我不明白为什么我们无法将其添加到GTF。