我对nifi相当陌生。我们想从FtpServer下载一个csv文件,然后插入HDFS。
我已经通过使用getSFTP和putHDFS处理器来处理一个小的测试文件。
现在,我们要使用大约15Gb的第一个实际数据文件,以及以后可能在200-500 GB范围内的日期文件。可以摄取的文件大小是否有任何限制,如果可以,如何克服这些限制?
非常感谢
答案 0 :(得分:1)
没有大小限制。但是,您的NiFi工作人员的内容存储库应足够大,可以一次包含此类文件。
在其他术语中,NiFi旨在移动大文件。