TF-IDF模型的困惑

时间:2019-07-10 09:31:24

标签: perplexity

我以前确实使用相同的公式来计算BOW模型的困惑度得分。但是,当我的tf-idf模型使用相同的代码时,无法计算分数。出现主题但不会显示困惑度分数。

# Show topics
topic_num = 5
word_num = 5
Lda = gensim.models.ldamodel.LdaModel
ldamodel_tfidf = Lda(corpus_tfidf, num_topics = topic_num, id2word = dictionary,
passes=20, random_state=1)
pprint(ldamodel_tfidf.print_topics(num_topics=topic_num, num_words=word_num))

# print perplexity score
print('Perplexity: ', ldamodel_tfidf.log_perplexity(corpus_tfidf)

SyntaxError: unexpected EOF while parsing

0 个答案:

没有答案