获取Galago的词汇表

时间:2015-11-18 17:36:41

标签: search-engine information-retrieval lemur

我正在使用Galago检索工具包(Lemur项目的一部分),我需要列出集合中的所有词汇术语(所有唯一术语)。实际上我需要一个List <String>Set <String>我真的很感激,让我知道如何才能获得这样的清单?

1 个答案:

答案 0 :(得分:1)

`DumpKeysFn&#39; class似乎给出了集合的所有键(唯一术语)。代码应该是这样的:

public static Set <String> getAllVocabularyTerms (String fileName) throws IOException{
    Set <String> result = new HashSet<> ();
    IndexPartReader reader = DiskIndex.openIndexPart(fileName);
    if (reader.getManifest().get("emptyIndexFile", false)) {
        // do something!
    }

    KeyIterator iterator = reader.getIterator();
    while (!iterator.isDone()) {
      result.add(iterator.getKeyString());
      iterator.nextKey();
    }
    reader.close();
    return result;
}