在方解石中添加UDF,并在NiFi Queryrecord处理器的SQL查询中使用该功能

时间:2019-08-19 21:34:37

标签: apache-nifi

我是NiFi的新手,并且要求在加载到HDFS之前对源文件中的列列表进行哈希处理。想知道是否可以使用散列逻辑在Apache Calcite中创建UDF,并在Queryrecord NiFi处理器查询中使用UDF,例如从流文件中选择hash(col1),col2,hash(col3)。这可行吗?我也探索了ScriptedRecordSetWriter方法,但是在继续执行Scripted方法之前,我想对上述Calcite方法或任何其他更好的方法/建议的可行性提供一些指导。

谢谢

0 个答案:

没有答案