PostgreSQL全文搜索:如何更改分类为"单词分隔符"?

时间:2016-08-09 07:47:36

标签: postgresql full-text-search

使用ts_debug我可以看到Postgres用什么符号(我称之为)a"字分隔符"。

示例:

SELECT ts_debug('english', 'Hello. ABC')

结果:

(asciiword,"Word, all ASCII",Hello,{english_stem},english_stem,{hello})
(blank,"Space symbols",". ",{},,)
(asciiword,"Word, all ASCII",ABC,{english_stem},english_stem,{abc})

.(点空格)被视为单词分隔符。 我的问题是,我需要Postgres将单个点.视为单词分隔符。

目前,如果我搜索ABC,则找不到内容为Hello.ABC的条目(点后没有空格),只能找到Hello. ABC

我正在使用此搜索查询:

SELECT description FROM incident WHERE
  to_tsvector('english', description) @@ to_tsquery('english', 'ABC')

另一个例子:搜索IOException将找不到java.io.IOException

有没有办法将单个点(没有空格)视为单词分隔符?

1 个答案:

答案 0 :(得分:3)

问题是解析器会将Hello.ABC识别为主机名:

SELECT alias, description, token, lexemes FROM ts_debug('english', 'Hello.ABC');
┌───────┬─────────────┬───────────┬─────────────┐
│ alias │ description │   token   │   lexemes   │
├───────┼─────────────┼───────────┼─────────────┤
│ host  │ Host        │ Hello.ABC │ {hello.abc} │
└───────┴─────────────┴───────────┴─────────────┘
(1 row)

您必须更改解析器或创建一个新解析器以避免这种情况,但这只能在C中完成。

我建议的解决方法是在处理之前用空格替换所有点和斜线:

SELECT to_tsvector('english',
          translate('Hello/ABC', '/.', '  ', 'g')
       ) @@ to_tsquery('english',
          translate('ABC', '/.', '  ', 'g')
       ) AS match;
┌───────┐
│ match │
├───────┤
│ t     │
└───────┘
(1 row)