python - 在 PyML 中获取多类问题的召回率(灵敏度)和精度(PPV)值

Question

我正在使用 PyML用于 SVM 分类。但是，我注意到当我使用 LOO 评估多类分类器时，结果对象不报告灵敏度和 PPV 值。相反，它们是 0.0:

from PyML import *
from PyML.classifiers import multi

mc = multi.OneAgainstRest(SVM())
data = VectorDataSet('iris.data', labelsColumn=-1)
result = mc.loo(data)

result.getSuccessRate()
>>> 0.95333333333333337
result.getPPV()
>>> 0.0
result.getSensitivity()
>>> 0.0

我查看了代码，但无法弄清楚这里出了什么问题。有人对此有解决方法吗？

Answer 1

您无法对多类问题进行通常的精度/召回测量。您必须获得每个类别的 Precision/Recall，并且可以计算加权平均值。

我不知道 PyML 的细节，但您可以通过预测并为每个类计算它们。