Klassificering: hur en modell sorterar information

En klassificerare är en modell som sorterar in information i kategorier. Exempelvis: skräppost eller viktigt mejl, godkänd ansökan eller avvisad, eller om en transaktion är legitim eller bedrägeri. Modellen har tränats på tidigare exempel och gissar nu på nya fall den aldrig sett.

Hur bra är den? Testa den på exempel där du redan vet svaret, men som modellen inte tränats på. Om den har rätt på 90 av 100 fall är träffsäkerheten 90 %.

Det finns två typer av fel, och de har olika konsekvenser:

• Modellen markerar ett viktigt mejl som skräppost. Du missar det. Det är ett falskt positivt fel.
• Modellen släpper igenom skräppost som ett vanligt mejl. Din inkorg blir full av skräp. Det är ett falskt negativt fel.

Vilket fel som är värst beror på sammanhanget. En modell som upptäcker sjukdomar får hellre larma i onödan (falskt positivt) än missa en sjuk patient (falskt negativt). Träffsäkerhet ensam säger inte allt om risken.