功能用于模型培训和测试。自然语言处理中词汇特征和正交特征之间有什么区别?优选实例。
答案 0 :(得分:4)
我不知道有这样的区别,大多数时候人们谈论词汇特征他们谈论使用这个词本身,而不是只使用其他特征,即它的词性。
Here is an example of a paper that means "whole word orthograph" when they say lexical features
人们可以冒险说正交可能意味着比字符序列本身更抽象的东西,例如序列是否大写/标题化/ camelcased /等等。但我们已经有了有用且清楚的理解形状特征面额。
因此,我建议区分这样的功能:
词汇功能: 整个单词,前缀/后缀(各种长度可能),词干词,词形词汇
形状特征: 大写,标题,camelcase,小写
语法和句法功能: POS,名词短语的一部分,动词短语的头部,介词短语的补语等......
这不是可能的功能和功能类别的详尽列表,但它可能会帮助您以更清晰,更广泛接受的方式对语言功能进行分类。