mINP——Reid领域新的评价指标

用于评价一个模型搜索 最难找到的样本的能力

下图所示,假设只有三个正确样本,用绿色框表示。

mINP——Reid领域新的评价指标

对于list 1和list2来说:

CMC1=1是一样的,都在第一位置搜到了

AP list 1更好。

但是由于list2在第5个位置就找到了所有的结果,list1在第10个位置才找到,所以对于最难的样本,list2的能力更强。

于是作者定义的NP以及INP。可以看出list2的INP更高,能力更强。该指标从一个新的角度体现了模型的能力。

公式如下:

mINP——Reid领域新的评价指标

mINP——Reid领域新的评价指标

实现:https://github.com/mangye16/Cross-Modal-Re-ID-baseline/blob/master/eval_metrics.py

论文:https://arxiv.org/pdf/2001.04193v1.pdf