搬运工干货炒

Question

为什么搬运工在

网上拦截算法

http://text-processing.com/demo/stem/

干fried到fri而不是fry？

我无法回想起任何以英语ied过去时为结尾的单词，这些单词的主格形式以i结尾。

这是一个错误吗？

Answer 1

由Porter Stemmer返回的词干不一定是动词的基本形式，或者根本不是有效词。如果你正在寻找它，你需要寻找一个变形器。

Answer 2

首先，词干分析器不是一个词形变换器，另见Stemmers vs Lemmatizers：

>>> from nltk.stem import PorterStemmer, WordNetLemmatizer
>>> porter = PorterStemmer()
>>> wnl = WordNetLemmatizer()
>>> fried = 'fried'
>>> porter.stem(fried)
u'fri'
>>> wnl.lemmatize(fried)
'fried'

接下来，一个词形变换器对词性（POS）敏感：

>>> wnl.lemmatize(fried, pos='v')
u'fry'