IDF比TF-IDF好吗?到目前为止,我理解TF对于对文档中的单词赋予权重以使该文档与预定义查询匹配是很重要的。如果我只想在没有任何特定IR目的的情况下对文档集合中的单词的重要性进行排序,为什么我应该使用TF术语?
答案 0 :(得分:1)
TF-IDF中的TF表示文档中术语的频率。换句话说,TF-IDF是术语和文档的度量。 Here很好地说明了我的意思。
据我了解您的情况,您不使用任何特定文档,而是希望在整个文档集合中为每个单词提供一些完整的特征。所以,如果你想找到像停止词这样的东西,你应该使用IDF(或简称DF,文档频率)。另请参阅related question。