Question

以下计划：

import java.util.Arrays;
import java.util.List;

import org.apache.lucene.analysis.standard.StandardAnalyzer;
import org.apache.lucene.queryParser.ParseException;
import org.apache.lucene.queryParser.QueryParser;
import org.apache.lucene.util.Version;

public class LuceneTest {

  static final List<Character> SPECIAL_CHARS =
      Arrays.asList('\\', '+', '-', '!', '(', ')', ':', '^', '[', ']', '"', '{', '}', '~', '*', '?', '|', '&');

  public static void main(String[] args) throws ParseException {
    QueryParser query = 
        new QueryParser(Version.LUCENE_31, "", new StandardAnalyzer(Version.LUCENE_31));


    for (char c : SPECIAL_CHARS) {
      System.out.println(c + " -> " + query.parse("__catch_all:foo\\" + c + "bar").toString());
    }
  }

}

给出这个输出：

\ -> __catch_all:foo __catch_all:bar
+ -> __catch_all:foo __catch_all:bar
- -> __catch_all:foo __catch_all:bar
! -> __catch_all:foo __catch_all:bar
( -> __catch_all:foo __catch_all:bar
) -> __catch_all:foo __catch_all:bar
: -> __catch_all:foo:bar
^ -> __catch_all:foo __catch_all:bar
[ -> __catch_all:foo __catch_all:bar
] -> __catch_all:foo __catch_all:bar
" -> __catch_all:foo __catch_all:bar
{ -> __catch_all:foo __catch_all:bar
} -> __catch_all:foo __catch_all:bar
~ -> __catch_all:foo __catch_all:bar
* -> __catch_all:foo __catch_all:bar
? -> __catch_all:foo __catch_all:bar
| -> __catch_all:foo __catch_all:bar
& -> __catch_all:foo __catch_all:bar

注意与明显的不一致：并且还注意到我正在逃避特殊字符（与QueryParser.escape完全相同）。我希望StandardAnalyzer能够从查询术语中删除特殊的标点符号，几乎在所有情况下都可以。

这看起来特别不一致的原因是使用StandardAnalyzer和字段文本“foo：bar”编写文档会给我一个两个术语字段，foo和bar！

第二轮逃脱给出了正确的结果，即有效地“foo \\：bar”;但为什么只对冒号有必要呢？为什么我需要使用QueryParser.escape（QueryParser.escape（mystring））来避免这种行为？

Answer 1

'：'的不同处理不是QueryParser的错误，而是StandardAnalyzer的错误。实际上，'：'是列表中唯一一个不被StandardAnalyzer视为分隔符的字符。因此，分析“a：b”将产生一个标记“a：b”，而分析“a'b”将产生两个标记“a”和“b”。

以下是发生的事情：

Original String -> unescaped string -> tokens -> query

"foo\:bar" -> "foo:bar" -> [ "foo:bar" ] -> TermQuery(__catch_all, "foo:bar")

"foo\+bar" -> "foo+bar" -> [ "foo", "bar" ] -> TermQuery(__catch_all, "foo") OR TermQuery(__catch_all, "bar")

Lucene QueryParser行为不一致

1 个答案: