使用同义词()从wordnet中提取同义词

时间:2011-09-22 09:24:07

标签: r nlp

假设我通过来自wordnet的synonyms()函数提取“help”的同义词,并得到以下内容:

Str = synonyms("help")    
Str
[1] "c(\"aid\", \"assist\", \"assistance\", \"help\")"     
[2] "c(\"aid\", \"assistance\", \"help\")"                 
[3] "c(\"assistant\", \"helper\", \"help\", \"supporter\")"
[4] "c(\"avail\", \"help\", \"service\")"  

然后我可以使用

获得一个字符串
unique(unlist(lapply(parse(text=Str),eval)))

最后看起来像这样:

[1] "aid"        "assist"     "assistance" "help"       "assistant"  "helper"     "supporter" 
[8] "avail"      "service"

上述过程由Gabor Grothendieck提出。他/她的解决方案很好,但我仍然无法弄清楚,如果我将查询字词更改为“公司”,“男孩”或其他人,则会回复错误消息。

一个可能的原因可能是由于“公司”的“第六”同义词(请参见下文)是单个术语,并不遵循“c(\”company \“)”的格式。

synonyms("company")

[1] "c(\"caller\", \"company\")"                                    
[2] "c(\"company\", \"companionship\", \"fellowship\", \"society\")"
[3] "c(\"company\", \"troupe\")"                                    
[4] "c(\"party\", \"company\")"                                     
[5] "c(\"ship's company\", \"company\")"                            
[6] "company"

有人可以帮助我解决这个问题。 非常感谢。

2 个答案:

答案 0 :(得分:2)

这些同义词的形式看起来像一个表达式,因此您应该能够如图所示解析它们。但是:当我执行上面的原始代码时,我从同义词调用中得到一个错误,因为你没有包含词性参数。

> synonyms("help")
Error in charmatch(x, WN_synset_types) : 
  argument "pos" is missing, with no default

观察synonyms的代码使用getSynonyms并且其代码包含unique,因此不再需要您正在进行的所有预处理(如果您更新);:

> synonyms("company", "NOUN")
[1] "caller"         "companionship"  "company"       
[4] "fellowship"     "party"          "ship's company"
[7] "society"        "troupe"        
> synonyms
function (word, pos) 
{
    filter <- getTermFilter("ExactMatchFilter", word, TRUE)
    terms <- getIndexTerms(pos, 1L, filter)
    if (is.null(terms)) 
        character()
    else getSynonyms(terms[[1L]])
}
<environment: namespace:wordnet>

> getSynonyms
function (indexterm) 
{
    synsets <- .jcall(indexterm, "[Lcom/nexagis/jawbone/Synset;", 
        "getSynsets")
    sort(unique(unlist(lapply(synsets, getWord))))
}
<environment: namespace:wordnet>

答案 1 :(得分:1)

您可以通过创建一个使用R的try机制来捕获错误的小辅助函数来解决这个问题。在这种情况下,如果eval产生错误,则返回原始字符串,否则返回eval的结果:

创建辅助函数:

evalOrValue <- function(expr, ...){
  z <- try(eval(expr, ...), TRUE)
  if(inherits(z, "try-error")) as.character(expr) else unlist(z)
}

unique(unlist(sapply(parse(text=Str), evalOrValue)))

产地:

[1] "caller"         "company"        "companionship" 
[4] "fellowship"     "society"        "troupe"        
[7] "party"          "ship's company"

我复制了您的数据,然后使用dput在此处重现:

Str <- c("c(\"caller\", \"company\")", "c(\"company\", \"companionship\", \"fellowship\", \"society\")", 
"c(\"company\", \"troupe\")", "c(\"party\", \"company\")", "c(\"ship's company\", \"company\")", 
"company")