Lucene AddIndexes(合并) - 如何避免重复?

时间:2009-07-12 22:20:56

标签: c# lucene lucene.net

当我合并一些临时索引(可能包含或可能不包含重复文档)时,我如何确保在主索引中最终得到一个副本?

由于

1 个答案:

答案 0 :(得分:1)

这是一种方式: 如果每个文档都有一个id,并且重复的文档具有相同的id:

mark the indexes by I1..Im.
for i in 1..m, let Ci = all the indexes but Ii
  for all the documents Dj in Ii,
  let cur_term = "id:<Dj's id>"
  for Ik in Ci
    Ik.deleteDocuments(cur_term)
merge all indexes

要点是:从其他索引中删除与当前文档具有相同ID的所有文档。在为所有索引完成此操作后,合并它们。 我知道这不优雅,但我不知道更好的算法。