评估多标签和多类数据标签

Question

是否有可用于多类多标签分类的评估指标？ 例如，我参加了以下竞赛，它需要ROC AUC作为评估指标：http://www.kaggle.com/c/mlsp-2013-birds

是否可以使用sklearn进行此操作？

Answer 1

这是来自Kaggle工程总监的图书馆： https://github.com/benhamner/Metrics/tree/master/Python

Answer 2

截至 2021 年，sklearn.metrics 包含多个可用于评估多类-多标签分类模型的函数。例如，accuracy_score 可以计算正确（即所有预测标签都是正确的）预测的比例。 hamming_loss 函数可以计算给定测试集中的汉明损失或错误预测的标签比例。您可以找到有关可用指标的深入讨论 here。