Märk data för hand
Kunna märka 30 exempel, upptäcka tvetydiga fall och förstå att märkning är ett val.
Förkunskaper
Intuition
En modell lär sig av märkta exempel: bild + «katt», recension + «positiv». Någon måste sätta etiketterna. Det låter enkelt tills du gör det.
«Filmen var inte dålig.» — positiv? «Bra skådespelare, usel handling.» — ?
Varje tvetydigt fall är ett val. Två personer märker olika. Det valet bakas in i modellen. Därför skriver man instruktioner (riktlinjer) och mäter hur ofta märkare håller med varandra.
Interaktivt
Gör det: skriv 30 korta meddelanden (eller ta från en chatt ni får använda). Märk var och en som «snäll», «neutral» eller «otrevlig». Låt en kompis märka samma 30 utan att se dina.
Räkna: hur många höll ni med om? 24 av 30 = 80 % överensstämmelse. Titta på de 6 ni var oense om. Skriv en regel som avgör dem («ironi räknas som otrevlig om …»). Märk om. Steg blev överensstämmelsen högre?
Det är exakt så riktiga dataset byggs.
Behärskning innebär
- Märker exempel enligt en instruktion och hittar tvetydiga fall
- Förklarar att märkning är ett val som påverkar modellen
Logga in för att göra övningarna och bygga upp din behärskning.
Källor
- CS Unplugged (CC BY-SA 4.0) — CC BY-SA 4.0
- Wikipedia — Inter-rater reliability (CC BY-SA 4.0) — CC BY-SA 4.0