03 Werkzeuge03-01
Konfusionsmatrix
Aus Fallzahl, Prävalenz sowie Sensitivität und Spezifität eines Modells: die vier Zählwerte, acht Raten und was die Fehler bei einem Preis je Fehlalarm und je Versäumnis kosten.
03-01 · Klassifikation · KonfusionsmatrixBinär · ein Arbeitspunkt · Kosten je Fehler
Eingaben
Kosten
Limit: ganze Fälle, aus den Raten gerundet, ein Arbeitspunkt. Die Schwellenkurve dahinter ist nicht modelliert.
Fehler kosten € 4.400 über 500 Fälle: 91 % durch 20 übersehene Abwanderer, 9 % durch 40 Fehlalarme.
Abb. 03-01 · Konfusionsmatrixn = 500 · Zeilen tatsächlich · Spalten vorhergesagt
Vorhergesagt positiv
Vorhergesagt negativ
Tatsächlich positiv
TP80Abwanderer erkannt
FN20Abwanderer übersehen
Tatsächlich negativ
FP40treue Kunden markiert
TN360treue Kunden freigegeben
Genauigkeit
88,0 %
(TP + TN) / n
Präzision
66,7 %
TP / (TP + FP)
Recall
80,0 %
TP / (TP + FN) · Sensitivität
Spezifität
90,0 %
TN / (TN + FP)
NPV
94,7 %
TN / (TN + FN)
F1
0,727
harmonisches Mittel von P und R
Falsch-positiv-Rate
10,0 %
FP / (FP + TN)
Falsch-negativ-Rate
20,0 %
FN / (FN + TP)
Gesamtkosten
€ 4.400
FP · c_FP + FN · c_FN
Kosten pro Fall
€ 8,80
Gesamtkosten / n
Regel
cost = FP · c_FP + FN · c_FN
cost = 40 · € 10 + 20 · € 200 = € 400 + € 4.000 = € 4.400 · € 8,80 pro Fall