构造R中的ROC曲线

Question

我正在对数量进行整体预测。我在每个观察点都有大约20个预测值。我将有一个x％的事件定义，即95％的最高观察值。我正在尝试使用R：

构建ROC曲线

1. ROCR是基于概率的ROC评分的良好方案吗？
2. 您能举例说明如何构建此ROC曲线吗？

假设假数据集。

我正在读各种各样的论文。但我对如何计算预测概率感到很困惑。

Answer 1

我建议您查看caret package。这对于合奏学习来说非常棒。它将根据RMSE，ROC（AUC）等通过交叉验证为您调整参数。这样就可以将您的数据分成更换样本，运行大量模型，同时调整参数并返回最佳模型。

这里的vignette（在包装页面上列出）很棒，你会看到那里的例子显示了绘制ROC曲线。

但是，如果您正在寻找的是从预测和保留数据计算ROC分数的简单方法，请查看this pdf的第11页。