Träffsäkerhet: hur bra är modellen?
Kunna beräkna hur många förutsägelser som var korrekta och förklara varför vissa blev fel.
Vardagsförklaring
När en modell är tränad gör den förutsägelser om nya data. Ibland rätt, ibland fel. Vi räknar: 8 rätt av 10 = ganska bra. 5 rätt av 10 = lika bra som att singla slant.
Varför blir det fel? Ofta för att det nya var olikt träningsexemplen: ett ovanligt mönster, bristande data, eller ett fall som ligger nära gränsen mellan två kategorier.
Att räkna rätt och fel är det viktigaste sättet att veta om en modell är tillförlitlig.
Interaktivt
Räkna själv:
| Ärende | Modellen sa | Rätt svar | |
|---|---|---|---|
| 1 | Betald | Betald | ✔ |
| 2 | Betald | Obetald | ✘ |
| 3 | Obetald | Obetald | ✔ |
| 4 | Obetald | Betald | ✘ |
| 5 | Betald | Betald | ✔ |
3 rätt av 5. Titta på ärende 2 och 4 — vad kan ha lurat modellen? Kanske ett ovanligt betalningsmönster eller bristande information. Förutsägelser som är fel visar var modellen behöver fler exempel.
Behärskning innebär
- Beräknar antal korrekta och felaktiga förutsägelser i en lista
- Ger en rimlig förklaring till varför en förutsägelse blev fel
Förkunskaper
Logga in för att göra övningarna och bygga upp din behärskning.
Källor
- CS Unplugged (CC BY-SA 4.0) — CC BY-SA 4.0