在检查搜索中忽略特殊字符(tittles)

时间:2015-07-21 19:07:27

标签: c# lucene umbraco examine

使用 Umbraco v6,检查搜索(不是完整的Lucene查询)。这是一个拉丁美洲/南美网站。我问过我的大学他们如何输入搜索/网址的标题,他们都说他们不是,他们只是使用"常规"字符(A-Z,a-z)。

我知道如何在传递给Examine时删除字符串的特殊字符 OUT ,但我需要反过来,如检查从属性中删除特殊字符以匹配查询。我有很多节点"在名称中有标记(这是我正在搜索的属性之一)。

我研究过的帖子:

我已经尝试过编写luence查询(或者我认为),但我没有进入任何点击。

// q is my query from QueryString
var searcher = ExamineManager.Instance.SearchProviderCollection["CustomSearchSearcher"];

//var query = searcher.CreateSearchCriteria().Field("nodeName", q).Or().Field("description", q).Compile();
//var searchResults = searcher.Search(query).OrderByDescending(x => x.Score).TakeWhile(x => x.Score > 0.05f);

var searchResults = searcher.Search(Global.RemoveSpecialCharacters(q), true).OrderByDescending(x => x.Score).TakeWhile(x => x.Score > 0.05f);

全球课程

    public static string RemoveSpecialCharacters(string str)
    {
        StringBuilder sb = new StringBuilder();
        for (int i = 0; i < str.Length; i++)
        {
            if ((str[i] >= '0' && str[i] <= '9')
                    || (str[i] >= 'A' && str[i] <= 'z' || (str[i] == '.' || str[i] == '_'))
                || str[i] == 'á' || str[i] == 'é' || str[i] == 'í' || str[i] == 'ñ' || str[i] == 'ó' || str[i] == 'ú')
            {
                sb.Append(str[i]);
            }
        }

        return sb.ToString();
    }

如上所述,我需要从Lucene中删除特殊字符(tittles),而不是传入的查询。

来自:https://our.umbraco.org/documentation/reference/searching/examine/overview-explanation

我也读过关于&#34; Analyzers&#34;,但我之前从未与他们合作过,也不知道获得/安装/添加哪个(等)VS等等。是更好的方法来解决这个问题?

1 个答案:

答案 0 :(得分:1)

自定义分析仪就是答案。

这是在umbraco论坛上回答的:https://our.umbraco.org/forum/developers/extending-umbraco/16396-Examine-and-accents-for-portuguese-language

制作一个剥离所有特殊字符的分析器:

  public class CIAIAnalyser : Analyzer
{
    public override TokenStream TokenStream(string fieldName, System.IO.TextReader reader)
    {
        StandardTokenizer tokenizer = new StandardTokenizer(Lucene.Net.Util.Version.LUCENE_29, reader);

        tokenizer.SetMaxTokenLength(255);
        TokenStream stream = new StandardFilter(tokenizer);
        stream = new LowerCaseFilter(stream);
        return new ASCIIFoldingFilter(stream);

    }

}

然后对搜索输入执行相同的操作。

   public class CleanAccent
{
    public static string RemoveDiacritics(string input)
    {
        // Indicates that a Unicode string is normalized using full canonical decomposition.

        if (String.IsNullOrEmpty(input)) return input;

        string inputInFormD = input.Normalize(NormalizationForm.FormD);
        var sb = new StringBuilder();

        for (int idx = 0; idx < inputInFormD.Length; idx++)
        {
            UnicodeCategory uc = CharUnicodeInfo.GetUnicodeCategory(inputInFormD[idx]);
            if (uc != UnicodeCategory.NonSpacingMark)
            {
                sb.Append(inputInFormD[idx]);
            }
        }

        return (sb.ToString().Normalize(NormalizationForm.FormC));
    }

}

然后在ExamineSettings.config中引用分析器。