性能度量
测试准确率和测试错误率
混淆矩阵
查准率和查全率(TPR)和FPR
查全率TPR
查准率
FPR
实际未负的样本中被错分为正样本的比例。
权衡
- 查全率导向任务
- 传统的搜索和信息提取
- 瘤检测
- 经常伴随人类专家过滤处假正例
- 查准率导向
- 搜索引擎排序，查询建议
- 文档分类
- 许多面向客户的任务（用户会记住失败的例子！！）
F1_score和Fbeta_score
PR曲线和ROC曲线
PR曲线
PR曲线一般X轴是Recall，Y轴是Precision
实际未负的样本中被错分为正样本的比例。
PR曲线一般X轴是Recall，Y轴是Precision