快速索引解决方案，可处理数百万个文件

Question

我有一个应用程序，该应用程序使用Trigram索引搜索文件（存储在磁盘上），并构造一个索引，该索引也允许遍历（path.*.file*-> path.to.file1，path.2.file2）。

但是，随着文件数量达到约5-8百万个，它开始消耗大量内存。我需要将其扩展到10-20百万个文件。

我还有什么其他选择？我尝试使用压缩的发布索引，但结果并没有更好。