是否在Perl中实现了Penn Treebank Tokenizer?

时间:2012-03-01 19:20:22

标签: perl nlp

我正在寻找一个Perl模块,它是this的端口,我基本上可以创建一个对象,调用tokenize()子例程,传入一堆文本并返回一个令牌列表。这样的效果。如果它不存在我会做,但没有意义重新发明轮子,对吧? :) TIA。

1 个答案:

答案 0 :(得分:3)

我找不到完全匹配,但Lingua::EN::TaggerLingua::TreebankText::StemTagPOSLingua::Stem::SnowballTreex::EN中的一个可以解决问题?< / p>