Solr索引时间标记器/过滤器未按预期工作?

时间:2019-06-26 17:52:38

标签: solr lucene

我正在使用我公司较早设置的Solr实例,但似乎设置不正确。我可以搜索类似q=*Paper*的东西来获取结果,但不能搜索paper

似乎索引时间标记器/过滤器未按我预期的那样工作。

schema.xml设置为令牌化,然后在此说明字段上进行索引和查询,但不区分大小写,例如:

<field name="S_DSC" type="string_search" indexed="false" stored="true" required="false"/>
...etc... 

<fieldType name="string_search" class="solr.TextField">
  <analyzer type="index">
        <!--Split at whitespaces and at punctuations. Strip other special characters.-->
        <tokenizer class="solr.StandardTokenizerFactory"/>
        <filter class="solr.LowerCaseFilterFactory"/>
        <!--Plural words handling. 'dogs'='dog'. Stemming not recommended. dry 'erase' board is not the same as dry board 'eraser'-->
        <filter class="solr.EnglishMinimalStemFilterFactory"/>
      </analyzer>
      <analyzer type="query">
        <tokenizer class="solr.StandardTokenizerFactory"/>
        <filter class="solr.LowerCaseFilterFactory"/>
        <filter class="solr.EnglishMinimalStemFilterFactory"/>
      </analyzer>
</fieldType>

solrconfig.xml的默认qf设置为:

<requestHandler name="/select" class="solr.SearchHandler">
  <lst name="defaults">
      <str name="spellcheck">false</str>
      <str name="spellcheck.dictionary">default</str>
      <str name="spellcheck.dictionary">wordbreak</str>
      <str name="spellcheck.onlyMorePopular">true</str>
      <str name="spellcheck.extendedResults">false</str>
      <str name="spellcheck.collate">true</str>
      <str name="spellcheck.count">3</str>
      <str name="spellcheck.maxCollations">1</str>
      <str name="spellcheck.maxCollationTries">10</str>
      <str name="defType">synonym_edismax</str>
      <str name="synonyms">false</str>
      <str name="qf">C_PN^20.0 PN^15.0 C_S_DSC^10.0 S_DSC^10.0 M_PN^5.0 DIM_NM^2.0 BRD^2.0 combined_search^1</str>
  <str name="a">{!type=synonym_edismax qf=$qf v=$q}</str>
  </lst>

当我查询q=*时我得到结果 select?q=*&rows=10&start=0&wt=json

    "docs": [
        {
            "S_DSC": "Foo 8.5\" x 11\" Copy Paper, 20 lbs, 92 Brightness, 5000/Carton (123456)"
            ...etc...
        },

但是,如果我尝试搜索描述(S_DSC)中的术语,除非它区分大小写并且在其周围加上星号,否则我不会得到结果。

我得到q=*Paper*的结果

"parsedquery": "(+DisjunctionMaxQuery((combined_search:*paper* | PN:*Paper*^15.0 | S_DSC:*paper*^10.0 | C_PN:*Paper*^20.0 | BRD:*Paper*^2.0 | M_PN:*Paper*^5.0 | DIM_NM:*Paper*^2.0 | C_S_DSC:*paper*^10.0)))/no_coord",

没有q=paper的结果

"parsedquery": "(+DisjunctionMaxQuery((combined_search:paper | PN:paper^15.0 | S_DSC:paper^10.0 | C_PN:paper^20.0 | BRD:paper^2.0 | M_PN:paper^5.0 | DIM_NM:paper^2.0 | C_S_DSC:paper^10.0)))/no_coord",

没有q=Paper的结果

"parsedquery": "(+DisjunctionMaxQuery((combined_search:paper | PN:Paper^15.0 | S_DSC:paper^10.0 | C_PN:Paper^20.0 | BRD:Paper^2.0 | M_PN:Paper^5.0 | DIM_NM:Paper^2.0 | C_S_DSC:paper^10.0)))/no_coord",

难道不是要对上面的S_DSC进行令牌化,然后对令牌进行小写化吗? (这样paper就在其中吗?) 我在这里想念什么?欣赏任何见解:)

1 个答案:

答案 0 :(得分:2)

您的S_DSC字段未编制索引:

<field name="S_DSC" type="string_search" --> indexed="false"  <--

未索引的字段将永远不会产生匹配。我的猜测是您的匹配来自未索引的其他未处理字段之一,这就是为什么您得到所看到的行为。

当您将debug=all附加到查询中时,找到的每个文档都会为每个字段显示术语频率匹配(即组成得分的词),让您查看哪些字段产生了匹配。